Технические дубли страниц в SEO

СОДЕРЖАНИЕ:

Под техническими дубликатами страниц в контексте SEO предполагается практически идентичный контент, появляющийся на нескольких URL по техническим причинам, а не в результате намеренного копирования или плагиата.

Почему технические дубли — это плохо?

  • Размывание авторитета страницы: Поисковые системы могут распределить «ценность» или «авторитетность» страницы между несколькими дублирующими URL. Это означает, что ни один из дубликатов не может накопить полную ценность, что потенциально снижает рейтинг каждого отдельного URL.
  • Неполная индексация: Поисковики выделяют определенное количество ресурсов для сканирования веб-сайта. При наличии нескольких дублирующихся страниц роботы Гугла или Яндекса тратят свои лимиты на эти дубликаты, оставляя меньше ресурсов для обнаружения нового или обновленного контента.
  • Путаница при индексировании: Поисковые системы могут запутаться в том, какую версию страницы включать или исключать из своего индекса. Такая путаница может привести к тому, что в результатах поиска будет показана неправильная версия страницы, что может не соответствовать замыслу владельца сайта.
  • Сложность анализа эффективности: Наличие нескольких URL-адресов для одного и того же контента усложняет отслеживание эффективности конкретной страницы. Анализ вовлеченности пользователей, коэффициентов конверсии и других показателей может стать сложной задачей, препятствующей принятию решений на основе данных.
  • Потенциальные штрафные санкции: Хотя это случается редко, поисковики могут воспринять дублированный контент как попытку манипулирования рейтингом. В крайних случаях такое восприятие может привести к штрафным санкциям, снижающим видимость сайта в результатах поиска.
  • Влияние на ссылочный «вес»: Если различные сайты ссылаются на различные дубликаты одного и того же контента, то ссылочный вес может быть разделен между этими дублями.

Примеры дублей и их решения

Страницы с WWW и без WWW

Так сложилось, что по умолчанию каждая страница создаётся сразу по двум адресам (с www и без). И для того чтобы это не стало проблемой потребуются специальные настройки

  • Пример: www.example.com и example.com
  • Решение: Выбор одной из версии как основной и настройка 301 редиректа с неосновной версии на основную

Версии HTTP и HTTPS:

При подключении безопасного протокола передачи данных https, у каждой страницы появятся 2 версии: на https и http

  • Пример: http://www.example.com и https://www.example.com
  • Решение: Реализация 301 редиректа с HTTP-версии на HTTPS.

URL с параметрами:

Это когда одно и то же содержимое, доступно по url с различными параметрами. Параметры могут появляться по многим причинам: добавляются маркетологами для аналитики, в адресах сортировки и фильтрации, при управлении сеансами пользователей, для страниц поиска и др.

  • Пример: https://example.com/product?color=blue и https://example.com/product?color=red могут показывать одно и то же содержимое, но с разными цветами.
  • Решение: В этом случае в файле robors.txt можно закрыть для индексации все дублирующиеся url с параметрами добавив строчку Disallow: */*?color=. Таким образом в индексе останется только основной адрес https://example.com/product, а дубли с параметром поисковики не увидят. Либо использовать тег canonical: в код страниц с параметрами прописать <link rel="canonical" href="https://example.com/product"/>. Так на страницах дублей мы покажем какой url основной

Страницы со / и без:

На внутренних страницах часто возникают дубли, из-за того что одна страница доступна со / в конце и без него.

  • Пример: www.example.com/page и www.example.com/page/
  • Решение: В рамках всего сайта выбрать основную версию адресов (со / в конце или без) и настройка 301 редиректа с неосновной версии страниц на основную

Пагинация:

Когда в каталоге много товаров, или в блоге много статей возникает потребность в пагинации: разделение контента на несколько страниц

  • Пример: Каталог товаров на нескольких страницах, например www.example.com/products?page=1 и www.example.com/products?page=2. Такие страницы являются частичными дублями поскольку товары на разных страницах пагинации разные, но тем не менее они относятся к одному каталогу — в этом и дублирование.
  • Решение: В код страниц пагинации прописать <link rel="canonical" href="www.example.com/products"/>. Так на страницах дублей мы покажем, что адрес каталога — основной.

Что ещё нужно проверить

Описание Пример Решение
Страницы с множественными слешами «/» в конце или внутри url Группа дублей 1:
  • https://site.ru/
  • https://site.ru/////
  • https://site.ru/////////////////
Группа дублей 2:
  • https://site.ru/page/
  • https://site.ru//////page/
  • https://site.ru///page//////
Настройка 301 редиректов с дублей на основной адрес, либо настройка 404 ответа сервера для дубликатов (а для основной страницы ответ должен быть 200)
Адреса (главная и внутренние страницы) со следующими «хвостами»:
  • index.php
  • index.htm
  • index.html
  • home.php
  • home.htm
  • home.html
Группа дублей:
  • https://site.ru/
  • https://site.ru/index.php
  • https://site.ru/index.htm
  • https://site.ru/index.html
  • https://site.ru/home.php
  • https://site.ru/home.html
  • https://site.ru/home.htm
Для дублей с «хвостами» настроить 404 ошибку
Внутренние url с капсом Группа дублей:
  • https://site.ru/page/
  • https://site.ru/PAGE/
В рамках всего сайта для url с заглавными буквами в адресе настроить 301-редирект на адреса, где все символы строчные.

Как обычно происходит процесс устранения дублей

  1. SEO-специалист:
    • Проводит подробный технический аудит сайта для выявления дубликатов.
    • На основе полученных результатов готовит техническое задание, которое представляет собой подробный документ с изложением конкретных действий, необходимых для устранения проблем.
  2. Программист:
    • Внедряет изменения в структуру сайта, схемы URL или другие элементы, как указано в техническом задании.
    • Проводит тестирование, чтобы убедиться, что изменения не нарушают существующие функции сайта
  3. SEO-специалист:
    • Проверяет работу программиста.
    • Отправляет дубли на ускоренную переиндексацию — чтобы поисковики как можно быстрее перестали их учитывать в ранжировании.

Хотите продвинуть сайт?

Звоните 8 (800) 350-81-86

Наши эксперты в области SEO знают как работать без ссылок и получить крутой результат без рисков для сайта и бизнеса. Ждём вас среди наших клиентов!

Оставить заявку

 

14 августа 2023 Seo-продвижение