Проверка массово сгенерированных описаний

Найти повторяющиеся фразы, противоречивые оговорки и пустые шаблоны по пользовательским правилам.

Рабочая область

Обработка на устройстве. Файлы и текст не отправляются в аналитику. Ctrl/Cmd+Enter — запуск.

Загрузка локальной обработки…

Настройки

Настройки содержат параметры, без исходных файлов. Автоматического сохранения нет.

Метод и ограничения

Находит общие n-граммы слов и совпадения ваших правил. Показывает исходный URL и конкретную фразу, чтобы редактор исправлял адресно; regex выполняется с таймаутом worker.

Локальная обработка: до2 млн символов или20 000 записей на источник; до50 000 строк результата. Тяжёлые операции имеют отдельные ограничения и отмену. Измеренный спрос и внешние данные не подставляются.

Методика и примеры

Проверка массово сгенерированных описаний

Находит общие n-граммы слов и совпадения ваших правил. Показывает исходный URL и конкретную фразу, чтобы редактор исправлял адресно; regex выполняется с таймаутом worker.

Входные данные примера

Основной источник

[
  {
    "url": "https://example.test/a/",
    "description": "Быстрый полезный удобный инструмент для работы с таблицами гарантирует результат"
  },
  {
    "url": "https://example.test/b/",
    "description": "Быстрый полезный удобный инструмент для работы с таблицами помогает сверке"
  },
  {
    "url": "https://example.test/c/",
    "description": "Быстрый полезный удобный инструмент для работы с таблицами нужен для очистки"
  }
]

Второй источник

[
  {
    "pattern": "гарантирует",
    "message": "Проверьте необоснованную гарантию"
  }
]

Результат примера

СтрокаURL / ключПроверкаОснование
1https://example.test/a/повтор фразы на 3 страницахбыстрый полезный удобный инструмент для работы
2https://example.test/b/повтор фразы на 3 страницахбыстрый полезный удобный инструмент для работы
3https://example.test/c/повтор фразы на 3 страницахбыстрый полезный удобный инструмент для работы

Показано строк: 3 из 10.

Локальная обработка: до2 млн символов или20 000 записей на источник; до50 000 строк результата. Тяжёлые операции имеют отдельные ограничения и отмену. Измеренный спрос и внешние данные не подставляются.

Источники метода

Следующая задача