Как пользоваться
- Вставьте фразы по одной в строке.
- Отметьте, что считать дублем: порядок слов, предлоги и союзы, словоформы, операторы.
- Скопируйте или скачайте очищенный список; найденные группы дублей показаны рядом.
Что такое неявные дубли
Явный дубль — одна и та же фраза дважды. Неявный — разные строки с одним смыслом: «купить диван» и «диван купить», «диван в Москве» и «диван Москва», «угловой диван» и «диваны угловые». Для поисковика это практически один запрос, а в ядре они раздувают список, искажают оценку частотности и стоимость проверки позиций.
Какие правила можно включить
- другой порядок слов — «купить диван» = «диван купить»;
- предлоги и союзы — «диван в москве» = «диван москве»;
- словоформы — сравнение по основам слов, без словаря, по окончаниям;
- операторы Яндекса — снимаются +, !, кавычки, квадратные скобки и минус-слова.
Регистр и буква «ё» не учитываются всегда. Список обрабатывается в браузере и никуда не отправляется.
Вопросы и ответы
Какая фраза остаётся из группы дублей?
Первая по порядку в исходном списке. Поставьте выше фразы с лучшей формулировкой — например, отсортировав список по частотности.
Есть ли ограничение на размер списка?
Жёсткого ограничения нет: десятки тысяч фраз обрабатываются за секунды прямо в браузере.
Можно ли загрузить фразы в проект?
Да, очищенный список можно вставить в проект FindHunt для проверки позиций — дубли там тоже убираются автоматически.