Дубли — разные адреса с одинаковым или существенно совпадающим основным содержанием. Одинаковый Title ещё не доказывает дубль, а разные заголовки не превращают копии в самостоятельные страницы. Сначала нужно определить, какие документы действительно нужны пользователю.
Где искать
Проверьте варианты HTTP/HTTPS, www, слешей и регистра; параметры отслеживания и сортировки; печатные версии; старые адреса; внутренний поиск и комбинации фильтров. Сопоставляйте содержание, а не только URL.
Отдельно рассматривайте языковые версии, страницы филиалов и полезные категории. Их похожий шаблон естественен. Отличия в ассортименте, условиях, языке и задаче могут оправдывать отдельный документ.
Решение зависит от назначения
| Ситуация | Направление решения |
|---|---|
| Старый адрес заменён новым эквивалентом | Постоянное перенаправление |
| Копия должна оставаться доступной | Canonical на предпочтительную версию |
| Служебная страница полезна посетителю, но не нужна в поиске | Noindex при доступном обходе |
| Документ удалён без замены | Корректный ответ отсутствия |
| Страница решает самостоятельную задачу | Сохранение и развитие содержания |
У canonical и noindex разные задачи. Первый предлагает предпочитаемую версию группы, второй ограничивает индексирование конкретной страницы. Robots.txt управляет обходом и не заменяет ни один из них.
Проверка по шагам
- Выгрузите обнаруженные адреса и канонические ссылки.
- Сгруппируйте кандидатов по шаблону URL и сходству основного содержания.
- Проверьте вручную несколько представителей каждой группы.
- Выберите целевые адреса и обновите внутренние ссылки и sitemap.
- Проверьте коды, цепочки и противоречащие инструкции.
- После переобхода сопоставьте заявленный и выбранный поисковой системой canonical.
Запишите причину каждого массового правила. Это позволит проверить, не затронет ли оно отдельную ценную категорию.
Чего не делать
Не перенаправляйте все удалённые товары на главную. Не канонизируйте разные порции пагинации на первую как будто это одно содержание. Не закрывайте все параметры, пока не определили, какие из них формируют полезные страницы.
Не переписывайте тысячи заголовков ради формальной уникальности, если проблема — в генерации одинакового документа. Исправление источника дублей обычно устойчивее косметической правки.
Как понимать результат
Число известных URL может уменьшиться без потери полезного охвата. Оценивайте сохранение нужных страниц, переходов и запросов, а не стремитесь индексировать каждый технический адрес. Срок обработки изменений зависит от обхода; обещать исчезновение всех дублей к конкретному дню нельзя.
Проверить на своём сайте
Начните с нескольких типичных страниц и зафиксируйте проблему до изменения шаблона. Если нужна проверка структуры и индексации, обсудите технический аудит.
Добавить комментарий