SEO и трафик Практическая лидогенерация
/ Автор: Дмитрий | Оставить комментарий
Дубли страниц — это одна из самых частых и коварных технических ошибок в SEO. Происходит она потому, что одно и то же содержание становится доступно по разным веб-адресам (URL). Поисковые системы видят это как несколько разных страниц с одинаковым контентом. Они не понимают, какую версию считать главной, и в результате «распыляют» вес страницы между всеми дублями, что мешает любой из них попасть в ТОП.
Почему возникают дубли страниц: 6 основных сценариев
1. Разные протоколы: HTTP и HTTPS
После перехода на защищённый протокол многие забывают настроить редиректы. В результате одна и та же страница доступна по двум адресам.
Примеры дублей:
http://site.ru/abouthttps://site.ru/about
Для Google и Яндекс это — два разных ресурса с идентичным контентом. Без 301-редиректа с HTTP на HTTPS вес делится пополам.
Как проверить и исправить:
Проверка: введите в Google site:http://вашсайт.ru. Если появляются результаты — значит, HTTP-версия проиндексирована.
Решение: настройте 301-редирект со всех HTTP-страниц на их HTTPS-аналоги. Это можно сделать:
- В файле
.htaccess(для Apache):Redirect permanent / https://вашсайт.ru/ - В настройках хостинга (многие панели управления предлагают «форсировать HTTPS» одним кликом)
- Через плагин (для WordPress): «Really Simple SSL» или «SSL Insecure Content Fixer»
2. Версии с www и без www
Самая распространённая ошибка: сайт доступен одновременно по двум адресам — с префиксом www и без него.
Примеры дублей:
site.ru/aboutwww.site.ru/about
Если не выбрать «предпочтительный домен» в Google Search Console и не настроить редирект, обе версии будут проиндексированы, а SEO-вес — распылен.
Как проверить и исправить:
Проверка: введите в Google site:www.site.ru и site:site.ru. Если в обоих случаях появляются результаты — у вас дубли.
Решение: выберите один основной вариант (рекомендуется без www) и настройте 301-редирект со всех страниц одной версии на другую.
- В
.htaccess(Apache):RewriteEngine On+ правило редиректа сwwwна чистый домен - В панели хостинга: многие провайдеры (Timeweb, Beget, Selectel) позволяют выбрать основной домен в настройках
- В WordPress: укажите правильный «Адрес сайта» в «Настройки → Общие» и используйте плагин «Redirection» для массовых редиректов
3. Варианты с косой чертой в конце и без
Некоторые CMS (особенно самописные или старые версии WordPress) обрабатывают URL с завершающим слешем и без него как разные страницы.
Примеры дублей:
site.ru/category/site.ru/category
Хотя содержание идентично, поисковик может создать две записи в индексе, что приведёт к распылению веса и снижению позиций.
Как проверить и исправить:
Проверка: откройте оба URL в браузере. Если оба отдают 200 OK и одинаковый контент — у вас дубли. Также проверьте в Google Search Console: раздел «Индекс» → «Страницы» — ищите дублирующиеся URL.
Решение: выберите единый формат (рекомендуется **с завершающим слешем** для категорий и без — для страниц) и настройте 301-редирект с неправильного варианта на правильный.
- В WordPress: используйте плагин «Redirection» или настройте вручную через
.htaccess - Для Apache: добавьте правило
RewriteRule ^(.+)/$ /$1 [R=301,L](или наоборот, в зависимости от выбранного формата) - Обязательно укажите канонический URL на каждой странице через тег
<link rel="canonical" ...>
4. Параметры в URL
Особенно актуально для интернет-магазинов, каталогов и сайтов с фильтрами: сортировка, UTM-метки, мобильные версии и другие параметры создают десятки копий одной страницы.
Примеры дублей:
site.ru/product/nike-air-maxsite.ru/product/nike-air-max?utm_source=newslettersite.ru/product/nike-air-max?sort=pricesite.ru/product/nike-air-max?mobile=1
Каждый параметр создаёт новый URL с тем же контентом. Без настройки в Search Console или канонического тега это приводит к массовым дублям, которые «съедают» краулинговый бюджет и дробят SEO-вес.
Как проверить и исправить:
Проверка: в Google Search Console перейдите в «Индекс» → «Страницы» и отфильтруйте URL с ?. Если таких сотни — у вас проблема с параметрами.
Решение: используйте комбинацию из трёх инструментов:
- Канонический тег: укажите основной URL без параметров на всех дублях через
<link rel="canonical" ...> - Google Search Console: в разделе «Настройки сканирования» → «Параметры URL» отметьте, какие параметры игнорировать (например,
utm_source,sort) - robots.txt: запретите индексацию служебных параметров через
Disallow: /*?sort=(если они не нужны в поиске)
5. Чувствительность к регистру
На Unix- и Linux-серверах (в отличие от Windows) URL чувствительны к регистру. Это означает, что /About-Us и /about-us — это две разные страницы для сервера и поисковых систем.
Примеры дублей:
site.ru/About-Ussite.ru/about-us
Пользователь не заметит разницы — оба адреса могут отображать одинаковый контент. Но поисковый робот проиндексирует обе версии, что приведёт к распылению SEO-веса.
Как проверить и исправить:
Проверка: откройте оба URL в браузере. Если оба возвращают статус 200 OK и одинаковый контент — у вас дубли. Также проверьте в Screaming Frog: включите опцию «Respect robots.txt» и «Crawl all subdomains», затем отфильтруйте URL по регистру.
Решение: выберите единый стандарт написания URL (рекомендуется **всё в нижнем регистре**) и настройте 301-редиректы со всех вариантов с заглавными буквами на нижний регистр.
- В
.htaccess(Apache): используйте правило сRewriteMapили плагин для автоматического редиректа на lowercase-версию - В Nginx: настройте редирект через
location ~ [A-Z]+return 301 - Обязательно укажите канонический URL в нижнем регистре на всех страницах через тег
<link rel="canonical" ...>
6. Главная страница с разными адресами
Главная страница часто доступна по нескольким URL-путям одновременно — особенно на сайтах, созданных на CMS с настройками по умолчанию или после миграции.
Примеры дублей:
site.rusite.ru/index.phpsite.ru/home
Если все три URL отдают одинаковый контент — это три дубля главной страницы. Поисковик не знает, какую версию показывать в выдаче, и делит авторитет между ними, ослабляя позиции.
Как проверить и исправить:
Проверка: откройте каждый из URL в браузере. Если все возвращают статус 200 OK и одинаковый контент — у вас дубли. Также введите в Google: site:site.ru inurl:index.php — если появятся результаты, проблема подтверждена.
Решение: оставьте только один «чистый» адрес главной страницы (рекомендуется https://site.ru/) и настройте 301-редиректы со всех остальных вариантов.
- В
.htaccess:Redirect 301 /index.php https://site.ru/и аналогично для/home - В WordPress: убедитесь, что в «Настройки → Общие» указан корректный «Адрес сайта» без
/index.php - Добавьте канонический тег на главной:
<link rel="canonical" href="https://site.ru/" />
Чем опасны дубли страниц?
- Распыление ссылочного веса: внешние ссылки делятся между дублями, снижая авторитет каждой.
- Снижение позиций: поисковик не может выбрать «лучшую» версию, поэтому может понизить все.
- Потеря краулингового бюджета: робот тратит время на сканирование одинаковых страниц, не доходя до новых.
- Ухудшение поведенческих факторов: пользователи могут попадать на «неправильную» версию и уходить.
Как найти и устранить дубли страниц
1. Проведите технический аудит сайта
Технический аудит — первый и самый важный шаг для выявления дублей. Он покажет не только дублирующий контент, но и другие SEO-ошибки, мешающие индексации.
Как провести аудит:
Screaming Frog SEO Spider (бесплатная версия до 500 URL):
- Запустите сканирование сайта
- Перейдите в раздел «Duplicate Content» → «Exact» — там будут страницы с одинаковым текстом
- Проверьте вкладку «Duplicate Titles» и «Duplicate Meta Descriptions»
Sitebulb (платный, но с визуальной картой сайта):
- Автоматически выделяет кластеры дублей
- Показывает, какие URL конкурируют за один и тот же контент
- Даёт рекомендации по canonical и редиректам
Результат аудита — чёткий список всех дублей, которые нужно устранить через редиректы, canonical или закрытие от индексации.
2. Настройте 301 редиректы
301-редирект — это постоянное перенаправление, которое передаёт до 99% SEO-веса с дубля на основную страницу. Это самый надёжный способ устранить дубли и консолидировать авторитет.
Что перенаправлять:
- С HTTP → на HTTPS (всё содержимое сайта)
- С версии без
www→ наwww(или наоборот — главное, чтобы был единый стандарт) - С
/index.php,/home,/default.html→ на корневой URL - С URL с заглавными буквами → на нижний регистр
Как настроить:
Для Apache (через .htaccess):
RewriteEngine On
RewriteCond %{HTTPS} off [OR]
RewriteCond %{HTTP_HOST} !^www\. [NC]
RewriteRule ^(.*)$ https://www.site.ru/$1 [R=301,L]
Для WordPress: используйте плагин «Redirection» — он позволяет массово настроить редиректы через удобный интерфейс без правки файлов.
Для хостинга: многие панели (Beget, Timeweb, Selectel) имеют встроенную опцию «форсировать HTTPS» и «выбрать основной домен» — этого часто достаточно.
3. Укажите канонический URL
Канонический тег — это «сигнал» для поисковых систем, который указывает, какую из дублирующих страниц считать основной. Он не устраняет дубли физически, но консолидирует SEO-вес на одной версии.
Как реализовать:
Добавьте в раздел <head> каждой страницы следующий тег:
<link rel="canonical" href="https://site.ru/page" />
Важно: значение href должно быть абсолютным (с https://) и вести на «чистую» версию без параметров, слешей или заглавных букв.
Где настроить:
- WordPress: плагины Yoast SEO, Rank Math или All in One SEO автоматически генерируют canonical-теги
- Интернет-магазины (Bitrix, OpenCart, WooCommerce): canonical настраивается в карточке товара или через шаблон мета-тегов
- Самописные сайты: добавьте тег вручную в шаблон
с динамической подстановкой текущего URL
Канонический URL — не замена редиректам, а дополнение. Используйте его вместе с 301-редиректами для максимального эффекта.
4. Настройте параметры в Google Search Console и Яндекс.Вебмастере
Чтобы поисковики не индексировали дубли с UTM-метками, фильтрами и сортировкой, укажите, какие параметры игнорировать при сканировании.
Как настроить:
Google Search Console: перейдите в «Настройки сканирования» → «Параметры URL» → добавьте параметры вроде utm_source, sort, mobile и отметьте их как «Не влияет на содержание страницы».
Яндекс.Вебмастер: откройте раздел «Инструменты» → «Параметры URL» → укажите те же параметры и выберите «Игнорировать при индексировании».
Это не удаляет дубли, но сообщает поисковикам: «Эти URL — не уникальный контент, не тратите на них краулинговый бюджет».
5. Закройте служебные версии через robots.txt
Если некоторые дубли невозможно устранить через редиректы (например, мобильные версии, служебные параметры или тестовые страницы), запретите их индексацию с помощью файла robots.txt. Это не удаляет дубли, но запрещает поисковым роботам их сканировать.
Как настроить:
Добавьте в файл robots.txt (доступен по адресу вашсайт.ru/robots.txt) директивы Disallow:
User-agent: *
Disallow: /*?sort=
Disallow: /*?mobile=
Disallow: /test/
Disallow: /temp/
Важно: этот метод подходит только для служебных URL, которые не должны попадать в поиск. Не используйте robots.txt для закрытия основных дублей — лучше настроить 301-редирект или canonical.
Решите проблему дублей с ЯЛидер!
Технический аудит сайта и устранение дублей
Дубли страниц — скрытая угроза вашему SEO. Они незаметно «съедают» краулинговый бюджет, дробят ссылочный вес и мешают росту позиций. Мы проведём полный технический аудит и устраним все типы дублей.
Что входит в работу:
- Настройка 301-редиректов: с HTTP на HTTPS, с www на без www, с
/index.phpна корень - Указание канонических URL на всех страницах через тег
- Настройка параметров в Google Search Console и Яндекс.Вебмастере (игнорирование
utm_source,sort,mobile) - Закрытие служебных версий через
robots.txt(если редирект невозможен)
Результат — консолидация всего SEO-веса на главных версиях страниц, восстановление краулингового бюджета и стабильный рост позиций в выдаче уже через 1–2 месяца.
Эта статья — часть цикла Почему сайт не продает?. Если у вас есть трафик, но нет заявок, или вы столкнулись с другими причинами низкой конверсии — читайте основную статью, где мы разбираем все 17 причин и решения.
Готовы устранить дубли и вернуть позиции в ТОП?
Позвоните или напишите ПРЯМО СЕЙЧАС
+7 (993) 991-51-31 (WhatsApp / Telegram / MAX)
✅ Получите БЕСПЛАТНЫЙ технический аудит сайта!
✅ Устраните дубли УЖЕ ЗАВТРА!
ЯЛидер! — это не просто сервис. Это ваш личный, высокоэффективный отдел продаж нового поколения.
