Удалить дубликаты CSV

Очистка CSV от дублей по всей строке или одному столбцу.

Загрузите CSV и удалите дубликаты, сравнивая все столбцы или один ключевой. Сохраняется первое вхождение; порядок оставшихся строк не меняется.

Ограничения

Сравнение точное (регистр и конечные пробелы важны). Пустые значения в ключевой колонке имеют один ключ — останется только первая такая строка.

Рекомендуемые инструменты

Частые вопросы

Сохраняется первое вхождение каждой повторяющейся строки.

Сохраняется первое вхождение, а все последующие строки с тем же ключом удаляются. Исходный порядок оставшихся строк не меняется.

В режиме всех столбцов дубликатами считаются только полностью одинаковые строки. При выборе одного столбца сравнивается только значение в нём, а различия в остальных колонках игнорируются.

Да, сравнение выполняется по точным строковым значениям после разбора CSV. Например, «Москва», «москва» и значение с конечным пробелом считаются разными, поэтому при необходимости нормализуйте данные заранее.

Все пустые значения в выбранной колонке имеют одинаковый ключ, поэтому останется только первое из них. Если пустые строки нужно сохранить, используйте сравнение по всем столбцам или предварительно заполните ключевую колонку.