CSV

CSV Deduplicate Rows

Убрать повторяющиеся строки из CSV.

Как это работает

Выгрузка из CRM или экспорт из нескольких источников подряд, а в итоговом CSV одна и та же запись о клиенте встречается три раза подряд с идентичными данными. Как удалить повторяющиеся строки в таблице вопрос, который вручную в Excel решается через не самое очевидное меню данные и удаление дубликатов, а здесь это одна кнопка.

Csv deduplicate rows online сравнивает строки целиком по всем колонкам, и если строка текстуально полностью совпадает с уже встреченной ранее, убирает повторное вхождение из результата, оставляя только первое по порядку появления в исходном файле.

Полезно применять при объединении экспортов из нескольких систем в один общий CSV, при чистке пользовательской базы от случайно задвоенных записей, или просто как разовую гигиену перед импортом данных в новую систему, которая не терпит дублей по вашим бизнес-правилам.

Частые вопросы

Считаются ли строки дубликатами, если отличается только регистр букв?

Нет, сравнение идет по точному текстовому совпадению с учетом регистра, строки Иванов и иванов в этой версии инструмента считаются разными и обе останутся в результате.

Что если дубликат по одной ключевой колонке, но остальные поля отличаются?

Этот инструмент удаляет только полностью идентичные строки по всем колонкам сразу, для дедупликации по одному конкретному ключевому полю с разными остальными значениями нужен более специфичный подход, например ручной выбор нужной версии записи.

Сохраняется ли строка заголовков при удалении дубликатов?

Да, первая строка с названиями колонок обрабатывается как заголовок и всегда остается на месте, дедупликация применяется только к строкам данных после нее.

Можно ли увидеть, сколько именно дубликатов было удалено?

Да, после обработки инструмент показывает статус с количеством найденных и убранных повторяющихся строк, чтобы сразу было понятно, насколько исходный файл был замусорен.