Doppelte Zeilen aus Text entfernen (Online-Tool + Code)

Doppelte Zeilen verschwenden Platz in Logs, CSVs und Datenexporten. So entfernen Sie sie.

Befehlszeile

# Sortieren und Duplikate entfernen
sort input.txt | uniq > output.txt

# Ursprüngliche Reihenfolge beibehalten (awk)
awk '!seen[$0]++' input.txt > output.txt

Python

lines = open('input.txt').readlines()
seen = set()
result = []
for line in lines:
    if line not in seen:
        seen.add(line)
        result.append(line)

Online-Tool

Verwenden Sie unseren Duplikat-Zeilen-Entferner für sofortige Deduplizierung.