Doppelte Zeilen Entfernen

Behalte nur das erste Vorkommen jeder Zeile in einem Textblock.

Dieses Tool läuft vollständig in deinem Browser. Deine Dateien werden niemals auf einen Server hochgeladen.

Was dieses Tool macht

Es durchsucht einen Textblock Zeile für Zeile und entfernt jede Wiederholung, wobei nur das erste Auftreten jeder exakten Zeile erhalten bleibt.

So verwendest du es

Füge deine Liste in das Feld ein — das deduplizierte Ergebnis erscheint sofort darunter, bereit zum Kopieren. Es gibt keinen Knopf zum Klicken und keine Einstellung zu konfigurieren.

Durchgerechnetes Beispiel

Das Einfügen von "apple", "banana", "apple", "cherry", "banana" (je eine pro Zeile) ergibt "apple", "banana", "cherry" — jeder Wert bleibt genau einmal erhalten, in der Reihenfolge seines ersten Auftretens.

Wie Duplikate erkannt werden

Jede Zeile wird als exakte Textübereinstimmung verglichen, verfolgt in der Reihenfolge, in der die Zeilen gelesen werden. Beim ersten Auftreten wird eine Zeile behalten; jede spätere Zeile mit identischem Text wird verworfen, alles andere behält seine ursprüngliche Position.

Groß-/Kleinschreibung

Der Vergleich ist groß-/kleinschreibungssensitiv und exakt: "Apple" und "apple" gelten als unterschiedliche Zeilen, ebenso Zeilen, die sich nur durch ein Leerzeichen am Ende oder ein verstecktes Tabulatorzeichen unterscheiden. Führe zuerst einen separaten Normalisierungsschritt aus, wenn du groß-/kleinschreibungsunabhängig deduplizieren möchtest.

Einschränkungen

Es werden nur Zeilen entfernt, die zeichengenau identisch sind — Beinahe-Duplikate wie "apple " (mit Leerzeichen am Ende) oder "Apple" werden nicht zusammengeführt. Für den Export einer einzelnen CSV-Spalte funktioniert das gut, solange sich sonst identische Zeilen nicht in zusätzlicher Formatierung unterscheiden.

Datenschutz

Die gesamte Liste wird lokal in deinem Browser verarbeitet — nichts wird auf einen Server hochgeladen.

Häufig gestellte Fragen

Wird zwischen Groß- und Kleinschreibung unterschieden?
Ja, Zeilen, die sich nur in der Groß-/Kleinschreibung unterscheiden, wie "Apple" und "apple", gelten als unterschiedliche Zeilen und beide bleiben erhalten.
Wird das erste oder letzte Vorkommen behalten?
Das erste Vorkommen jeder eindeutigen Zeile wird in der Reihenfolge des Auftretens behalten, jede spätere Wiederholung dieses exakten Textes wird entfernt.
Gelten Zeilen mit zusätzlichem Leerzeichen am Ende als Duplikate?
Nein, der Vergleich ist exakt — "apple" und "apple " (mit Leerzeichen am Ende) zählen als zwei unterschiedliche Zeilen und keine wird entfernt.
Kann ich das zum Deduplizieren einer CSV-Spalte nutzen?
Ja, solange jeder Wert mit identischer Formatierung in einer eigenen Zeile steht, funktioniert das Einfügen einer einzelnen Spalte gut.