Hapus baris duplikat
Tempelkan daftar dengan entri berulang dan hapus duplikat dalam satu langkah. Pertahankan kemunculan pertama setiap baris atau urutkan berdasarkan abjad setelah deduplikasi. Ideal untuk membersihkan email yang diekspor, log server, daftar tag, dan SKU inventaris. Pemrosesan tetap bersifat lokal — tidak ada yang diunggah.
Teks masukan
Cara menghapus baris duplikat
1. Tempel teks — satu item per baris.
2. Pilih apakah akan mempertahankan urutan asli atau mengurutkan baris setelah menghapus duplikat.
3. Abaikan huruf besar/kecil agar "Apple" dan "apple" dihitung sebagai sama line.
4. Salin keluaran yang telah dibersihkan.
Contoh deduplikasi
Pembersihan daftar email
Ekspor milis dengan 1.200 baris mungkin berisi 340 duplikat. Setelah deduping, 860 alamat unik tetap berada dalam urutan pertama kali dilihat.
IP unik log server
Tempelkan 5.000 baris log dan pertahankan satu alamat IP unik per baris — lebih cepat daripada sortir | uniq di terminal untuk pemeriksaan cepat.
Daftar tag untuk blog
"seo, pemasaran, SEO, konten, pemasaran" dibagi per baris → tag unik: seo, pemasaran, konten (opsi peka huruf besar-kecil menggabungkan SEO dan seo).
Kapan menggunakan penghapusan baris duplikat
• Saat Anda menggabungkan ekspor CSV dan memerlukan nilai unik di dalamnya satu kolom.
• Saat Anda membersihkan daftar yang ditempel sebelum mengimpor ke CRM atau spreadsheet.
• Bila Anda menginginkan entri unik dari keluaran perintah tanpa membuka terminal.
Kapan memilih sesuatu yang lain
• Bila duplikat mencakup beberapa kolom dan baris — gunakan perangkat lunak spreadsheet atau alat CSV.
• Bila Anda memerlukan pencocokan fuzzy ("Jon Smith" vs "John Smith") — alat ini hanya mencocokkan baris yang sama persis.
• Bila Anda perlu membandingkan dua dokumen lengkap — gunakan teks alat diff.
Pencocokan persis vs deduplikasi fuzzy
Alat ini menghapus baris yang identik dengan karakter demi karakter (setelah normalisasi huruf opsional). Itu tidak akan menggabungkan "New York" dan "New York, NY" atau email yang berbeda satu titik di Gmail. Untuk penghapusan duplikat kontak, normalkan format terlebih dahulu — rapikan spasi, huruf kecil email, hapus tanda baca tambahan — lalu jalankan penghapusan duplikat.
Penyimpanan pesanan dalam saluran data
Menjaga urutan yang pertama kali dilihat penting ketika daftar mencerminkan prioritas atau kronologi — misalnya. urutan pendaftaran atau kata kunci peringkat. Menyortir setelah dedup lebih baik bila Anda memerlukan indeks alfabet dari kategori unik. Pilih mode sebelum menyalin keluaran ke alat hilir.
Pertanyaan yang sering diajukan
Apakah ini menghapus baris kosong?
Baris kosong dapat dianggap sebagai duplikat satu sama lain. Aktifkan opsi trim jika alat Anda mendukung penghapusan baris kosong seluruhnya.
Apakah perbandingan peka huruf besar-kecil secara default?
Anda biasanya dapat mengubah sensitivitas huruf besar-kecil. Mode case-insensitive memperlakukan "Error" dan "error" sebagai baris yang sama.
Duplikat manakah yang disimpan?
Saat menjaga urutan, kemunculan pertama dari setiap baris unik disimpan; salinan selanjutnya akan dihapus.
Dapatkah ia menangani daftar yang sangat besar?
Batas memori browser berlaku, tetapi daftar dengan puluhan ribu baris pendek biasanya berfungsi dengan baik pada perangkat modern.
Apakah ini mengubah file asli saya?
Tidak. Anda menempelkan teks dan menyalin hasilnya — file sumber pada disk tidak pernah disentuh.
Apakah data diunggah?
Tidak. Deduplikasi berjalan sepenuhnya di peramban.