Duplikate entfernen in Excel und CSV: Deduplizierung Schritt für Schritt
6 Min.
Duplikate sind der häufigste Grund, warum ein CSV- oder Excel-Import von Datenbank, CRM oder ERP abgelehnt wird. Sie blähen Mengen auf, verfälschen Summen und lösen Fehler bei eindeutigen Schlüsseln aus. So finden und entfernen Sie sie sicher.
Die drei Arten von Duplikaten
Wiederholte Zeilen sind nicht gleich, und die Methode der Deduplizierung hängt vom Typ ab.
- Exaktes Duplikat: zwei Zeilen, Zelle für Zelle identisch. Löschen ist gefahrlos, eine Zeile genügt.
- Funktionales Duplikat per E-Mail: dieselbe Adresse in unterschiedlicher Schreibweise (Großbuchstaben, Leerzeichen am Ende). Zuerst normalisieren, dann deduplizieren.
- Duplikat per ID: derselbe Kundencode, SKU oder EAN erscheint mehrfach mit abweichenden Werten. Hier wird zusammengeführt (Upsert), nicht blind gelöscht.
Warum „Duplikate entfernen“ in Excel nicht genügt
Excel vergleicht die Werte genau so, wie sie angezeigt werden. „marc.durand@gmail.com“ und „MARC.DURAND@GMAIL.COM“ gelten als zwei Werte, ebenso eine Adresse mit unsichtbarem Leerzeichen. Echte Duplikate rutschen durch.
Zweite Grenze: Excel löscht die Zeile, ohne ihren Inhalt zu zeigen. Enthielt die zweite Zeile eine Telefonnummer, die in der ersten fehlt, ist diese Information endgültig verloren.
Die verlässliche Methode in vier Schritten
Für eine echte Deduplizierung zählt die Reihenfolge der Schritte mehr als das Werkzeug.
- 1. Leerzeichen am Anfang und Ende aller Textspalten entfernen.
- 2. Alle E-Mails in Kleinbuchstaben umwandeln und Telefonformate vereinheitlichen.
- 3. Exakte Duplikate erkennen, dann Duplikate per E-Mail und per ID.
- 4. Das Endblatt vor dem Export prüfen und die Anzahl entfernter Zeilen kontrollieren.
So behandelt Import Cleaner Duplikate
Import Cleaner führt diese Abfolge automatisch im Browser aus: Die Datei wird geparst, Spalten werden Zielfeldern zugeordnet, dann laufen 26 Prüfungen — darunter exakte Duplikate, doppelte E-Mails und wiederholte Identifikatoren.
Jede betroffene Zeile wird in einem interaktiven Raster hervorgehoben: Sie sehen die behaltene Zeile, die verworfene Zeile und den Grund. Korrektur mit einem Klick oder Zeile für Zeile, dann Export als sauberes CSV oder Excel.
FAQ
- Wie entferne ich Duplikate aus einer CSV ohne Excel?
- Laden Sie die Datei in Import Cleaner: Die CSV wird im Browser geparst, Duplikate werden aufgelistet, und Sie exportieren eine saubere Datei ohne Installation.
- Werden meine Daten auf einen Server geladen?
- Nein. Parsing, Erkennung und Korrektur laufen lokal im Browser; keine Datei verlässt Ihr Gerät.
- Kann man nur nach einer Spalte deduplizieren?
- Ja. Nach der Spaltenzuordnung kann die Deduplizierung auf E-Mail oder Identifikator statt auf die ganze Zeile basieren.
- Wie entferne ich doppelte Einträge in Excel ohne Datenverlust?
- Vergleichen Sie beide Zeilen vor dem Löschen: Das Raster zeigt behaltene und verworfene Zeile, sodass eine nur im Duplikat vorhandene Telefonnummer erhalten bleibt.
- Was ist der Unterschied zwischen Duplikate entfernen und Deduplizierung?
- „Duplikate entfernen“ löscht identische Zeilen; Deduplizierung normalisiert zuerst Schreibweisen und Formate und erkennt dadurch auch funktionale Duplikate.
- Funktioniert die Deduplizierung bei großen CSV-Dateien?
- Ja, große Dateien werden stapelweise im Browser verarbeitet, mit Warnung, wenn die klassischen Excel-Grenzen überschritten werden.
Jetzt Ihre Datei deduplizieren
CSV oder Excel laden: Duplikate werden in Sekunden aufgelistet.
Datei bereinigen