Поиск дубликатов строк в CSV

Найдите повторяющиеся записи в CSV по одному или нескольким ключевым столбцам. Откройте файл или вставьте таблицу, выберите разделитель и номера столбцов для сравнения. Можно учитывать либо игнорировать регистр, убирать крайние пробелы и исключать пустые ключи из сравнения. Инструмент покажет группы дублей и исходные строки, затем позволит скачать найденные записи или таблицу с первым вхождением каждого ключа.

Исходные данные

Замените примерные значения своими. Расчёт выполняется в браузере.

Ctrl + Enter — выполнить расчёт.

Как работает инструмент

Ключ — массив выбранных полей после заданной нормализации. В выгрузке без повторов сохраняется первое вхождение. Исходные поля сохраняются, кроме защиты формул при CSV-экспорте.

Что учитывать в результате

До 500 000 символов и 10 000 записей. В CSV-выгрузках значения, начинающиеся как формулы таблиц, получают апостроф; исходный файл не изменяется.

Источники методики

Пример для значений в форме

При исходных данных, заполненных в форме выше, результат будет следующим. Кнопка «Сбросить» возвращает эти значения.

Записей данных:
3
Групп дублей:
1
Лишних повторных записей:
1
Пустые ключи исключены из сравнения:
0

Как получить свой результат

  1. Заполните поле «CSV-данные» и остальные параметры в указанных единицах.
  2. Нажмите «Рассчитать». Если данные противоречат друг другу, исправьте поле по сообщению формы.
  3. Сравните результат с примером, измените параметры при необходимости и сохраните итог.