Откуда на сайте берутся дубли страниц
Чаще всего сайт открывается сразу по нескольким адресам: с www и без, с http и https, со слэшем на конце и без. Для поисковика это разные страницы с одинаковым содержимым.
Как проверить
Откройте свой сайт четырьмя способами: с www и без, по http и по https. Если все четыре открываются и адрес в строке не меняется на один и тот же — у вас дубли.
Как лечится
- Редирект 301 на основную версию.
- Канонический адрес на страницах с параметрами и метками.
- Clean-param в robots.txt для рекламных меток.
Чем дубли мешают на практике
Поисковик выбирает из копий одну — и не всегда ту, которую вы продвигаете. В выдаче может оказаться версия с рекламной меткой в адресе или с www, на которую никто не ставил ссылок. Заодно копии делят между собой накопленный вес: ссылки ведут на разные варианты одной страницы, и ни один не набирает полную силу.
Второе следствие — трата обхода. Робот забирает с сайта ограниченное число страниц за визит, и если половина лимита уходит на копии, новые материалы попадают в индекс медленнее. На маленьком сайте это незаметно, на растущем — уже ощутимо.
Откуда дубли берутся чаще всего
- Сайт отвечает и с www, и без, по http и https — четыре версии каждой страницы.
- Рекламные метки: каждый клик из Директа создаёт уникальный адрес.
- Слэш на конце: /uslugi и /uslugi/ считаются разными адресами.
- Одинаковые тексты на страницах городов или услуг, различающиеся одним словом.
Уточняющие вопросы
Как быстро проверить сайт на дубли?
Откройте его четырьмя способами — с www и без, по http и https — и посмотрите, меняется ли адрес в строке на один и тот же. Затем загляните в Вебмастер: раздел дублей заголовков покажет содержательные копии.
Дубли — это страшно?
Это не приговор, а трение: сайт работает, но хуже, чем мог бы. Технические дубли чинятся за вечер настройкой редиректов, и это одна из самых выгодных правок по соотношению усилий и эффекта.
Считаются ли версии для печати и мобильная версия дублями?
Отдельная мобильная версия на поддомене — уже архаика, современные сайты адаптивные, и у них одна страница на все экраны. Если у вас ещё так — это повод для переезда, а не для редиректов.