Tous les outils

Supprimer les lignes en double

Collez une liste avec des entrées répétées et supprimez les doublons en une seule étape. Conservez la première occurrence de chaque ligne ou triez par ordre alphabétique après la déduplication. Idéal pour nettoyer les e-mails exportés, les journaux de serveur, les listes de balises et les SKU d'inventaire. Le traitement reste local : rien n'est téléchargé.
Texte d'entrée

Comment supprimer les lignes en double

1. Collez votre texte — un élément par ligne.
2. Choisissez de conserver l'ordre d'origine ou de trier les lignes après avoir supprimé les doublons.
3. Ignorez éventuellement la casse afin que « Apple » et « Apple » comptent comme la même ligne.
4. Copiez la sortie nettoyée.

Exemples de déduplication

Nettoyage de la liste de diffusion

Un export de liste de diffusion de 1 200 lignes peut contenir 340 doublons. Après la déduplication, 860 adresses uniques restent dans l'ordre d'apparition.

Le serveur enregistre les adresses IP uniques

Collez 5 000 lignes de journal et conservez les adresses IP uniques, une par ligne — plus rapidement que le tri | uniq dans un terminal pour une vérification rapide.

Liste de balises pour un blog

"seo, marketing, SEO, contenu, marketing" divisé par ligne → balises uniques : seo, marketing, contenu (l'option insensible à la casse fusionne SEO et seo).

Quand utiliser la suppression des lignes en double ?

Lorsque vous fusionnez des exportations CSV et avez besoin de valeurs uniques dans une colonne.
Lorsque vous nettoyez des listes collées avant de les importer dans un CRM ou une feuille de calcul.
Lorsque vous souhaitez des entrées uniques à partir de la sortie de commande sans ouvrir de terminal.

Quand choisir autre chose

Lorsque les doublons s'étendent sur plusieurs colonnes et lignes, utilisez un tableur ou un outil CSV.
Lorsque vous avez besoin d'une correspondance floue (« Jon Smith » vs « John Smith »), cet outil correspond uniquement aux lignes exactes.
Lorsque vous avez besoin de comparer deux documents complets, utilisez l'outil de comparaison de texte.

Correspondance exacte vs déduplication floue

Cet outil supprime les lignes identiques caractère pour caractère (après normalisation facultative de la casse). Il ne fusionnera pas « New York » et « New York, NY », ni les e-mails qui diffèrent par un point dans Gmail. Pour la déduplication des contacts, normalisez d'abord les formats (coupez les espaces, les e-mails en minuscules, supprimez la ponctuation de fin), puis exécutez la déduplication.

Préservation des commandes dans les pipelines de données

Il est important de conserver l'ordre d'apparition en premier lorsque la liste reflète la priorité ou la chronologie - par ex. ordre d'inscription ou mots-clés classés. Le tri après la déduplication est préférable lorsque vous avez besoin d'un index alphabétique de catégories uniques. Choisissez le mode avant de copier la sortie dans les outils en aval.

Questions fréquentes

Est-ce que ça supprime les lignes vides ?

Les lignes vides peuvent être traitées comme des doublons les unes des autres. Activez les options de découpage si votre outil prend en charge la suppression complète des lignes vides.

La comparaison est-elle sensible à la casse par défaut ?

Vous pouvez généralement activer la sensibilité à la casse. Le mode insensible à la casse traite « Erreur » et « erreur » comme la même ligne.

Quel duplicata est conservé ?

Lors de la préservation de l'ordre, la première occurrence de chaque ligne unique est conservée ; les copies ultérieures sont supprimées.

Peut-il gérer de très grandes listes ?

Des limites de mémoire du navigateur s'appliquent, mais les listes contenant des dizaines de milliers de lignes courtes fonctionnent généralement correctement sur les appareils modernes.

Est-ce que cela modifie mon fichier d'origine ?

Non. Vous collez du texte et copiez le résultat : les fichiers sources sur le disque ne sont jamais touchés.

Les données sont-elles téléchargées ?

Non. La déduplication s'exécute entièrement dans votre navigateur.