Xóa các dòng trùng lặp trong danh sách
Danh sách lấy từ bảng tính, tệp xuất, log hay sao chép-dán thường xuyên bị trùng lặp. Công cụ này giúp xóa dòng trùng lặp chỉ trong một bước và giữ lại lần xuất hiện đầu tiên, nhờ đó danh sách của bạn vẫn giữ nguyên thứ tự ban đầu. Các tùy chọn bổ sung cho phép bạn không phân biệt chữ hoa chữ thường, bỏ qua khoảng trắng thừa, xóa dòng trống và sắp xếp lại kết quả. Mọi quá trình xử lý đều diễn ra cục bộ trên trình duyệt, đảm bảo các dữ liệu nhạy cảm như địa chỉ email hay ID khách hàng không bao giờ rời khỏi máy tính của bạn.
Giải thích các tùy chọn
- Không phân biệt hoa thường –
Londonvàlondonđược tính là cùng một dòng. - Xóa khoảng trắng thừa – loại bỏ khoảng trắng và tab ở đầu và cuối mỗi dòng trước khi so sánh, đây là nguyên nhân thường gặp khiến "lỗi trùng lặp không thể xóa bỏ".
- Xóa dòng trống – loại bỏ hoàn toàn các dòng trống.
- Sắp xếp – giữ nguyên thứ tự ban đầu, hoặc sắp xếp theo bảng chữ cái A→Z hay Z→A bằng thuật toán sắp xếp tự nhiên, nhận biết ngôn ngữ.
Dòng trạng thái sẽ báo cáo số lượng dòng đầu vào, số dòng duy nhất (unique) ở đầu ra, cùng với số dòng trùng lặp và dòng trống đã bị xóa.
Hữu ích cho
Danh sách email và liên hệ. Gộp danh sách đăng ký từ nhiều nguồn, sau đó lọc trùng địa chỉ trước khi nhập vào công cụ gửi email. Hãy bật Bỏ qua viết hoa/thường, vì địa chỉ email thực tế không phân biệt chữ hoa chữ thường.
Nghiên cứu từ khóa SEO. Danh sách từ khóa xuất từ các công cụ khác nhau thường bị trùng lặp rất nhiều. Dán tất cả vào đây, lọc trùng và sắp xếp để có một danh sách tổng hợp hoàn chỉnh.
Làm sạch dữ liệu. Lấy các giá trị duy nhất từ một cột trong bảng tính — mã sản phẩm, thành phố, danh mục — mà không cần tạo pivot table.
Lập trình viên và quản trị viên. Lọc trùng các dòng log, địa chỉ IP, tên package hoặc đường dẫn file. Kết hợp với Regex Tester, bạn có thể trích xuất các giá trị từ log trước, sau đó mang vào đây để lọc trùng.
Mẹo
- Để tìm điểm khác biệt giữa hai phiên bản của một danh sách thay vì xóa các mục trùng lặp, hãy dùng Diff Checker.
- Nếu các mục được phân tách bằng dấu phẩy thay vì xuống dòng, hãy thay thế dấu phẩy bằng dấu xuống dòng trước (ví dụ: dùng tính năng tìm và thay thế trong trình soạn thảo của bạn), sau đó dán kết quả vào đây.
- Bạn muốn đếm xem còn lại bao nhiêu mục? Thanh trạng thái sẽ hiển thị điều đó, hoặc dùng Word Counter để xem thống kê chi tiết.