Дубли страниц: откуда берутся и как их устранить

Дубли страниц — одинаковое или почти одинаковое содержание, доступное по разным адресам. Для человека это одна страница, для поисковика — несколько разных, которые конкурируют между собой.

Откуда берутся

• Адрес с www и без
• Со слешем на конце и без
• HTTP и HTTPS версии
• Параметры: сортировка, фильтры, метки рекламы
• Одна карточка в нескольких категориях
• Версии для печати
• Страницы пагинации с одинаковыми текстами

Чем вредят

Ссылки и сигналы распределяются между несколькими адресами. Поисковик может выбрать для показа не ту страницу. Робот тратит время на сканирование одинаковых страниц вместо новых.

Как найти

Краулеры сайта находят страницы с одинаковыми заголовками и содержанием. Search Console показывает страницы, исключённые как дубли. Поиск по оператору site: с фрагментом текста выявляет копии.

Постоянный редирект

Для технических дублей — www и без, слеш, HTTP — лучшее решение: постоянный редирект на основной адрес. Пользователь и робот всегда попадают на один вариант.

Канонический адрес

Для страниц, которые должны оставаться доступными по разным адресам — например, с параметрами сортировки, — указывается канонический адрес основной страницы. Поисковик понимает, какую версию учитывать.

Запрет индексации

Служебные страницы и бесконечные комбинации фильтров можно закрыть от индексации, если они не несут ценности для поиска.

Внутренние ссылки

Все внутренние ссылки должны вести на основной адрес страницы, а не на его варианты.

Итог

Одна страница — один адрес. Проверяйте дубли при аудите и после изменений в структуре и движке сайта.