Дубли страниц: что это и как убрать по справке Яндекса

Слово «дубли» владелец сайта обычно встречает в одном из двух мест: в Яндекс Вебмастере, где вдруг появилось уведомление, или в отчёте подрядчика, где написано «устранили дубли». И в обоих случаях непонятно главное — насколько это срочно.

Я открыл 11 страниц, которые выходят в поиске по запросу «дубли страниц», и сверил каждую с тем, что про дубли написано в справке Яндекса и в документации Google. Расхождение получилось не в деталях, а в самой постановке: топ пугает потерей половины трафика, а первоисточник говорит, что число таких исключённых страниц на ранжирование сайта не влияет. Ниже — что именно дубли делают с сайтом, как они выглядят в Вебмастере и какие четыре способа их убрать признаёт сам Яндекс.

01Дубль — это одинаковый текст по разным адресам, а не похожая страница

Определение в справке Яндекса начинается с условия доступности: дубли появляются, «Если страницы сайта доступны по разным адресам, но имеют одинаковое содержимое». Дальше важное уточнение: «Дублями признаются страницы в рамках одного сайта» — чужая копия вашего текста это другая история и другие инструменты.

Главное же про механику сказал Платон Щукин, отвечая на прямой вопрос, смотрит ли робот на адрес: «Нет, сравнивается непосредственно содержимое самих страниц и адрес не играет роли». Это переворачивает логику большинства статей топа, которые разбирают дубли как набор URL-шаблонов. Шаблоны адресов — только частая причина; признаком дубля робот считает совпадение текста.

Что происходит потом, справка описывает в три шага: «Страницы с совпадающим текстом поисковый робот объединяет в группу дублей», «Из этой группы робот выберет одну страницу-дубль, которая будет показываться в результатах поиска» и — ключевое — «Робот время от времени может менять свой выбор». Отсюда же следствие, которое владельцы замечают раньше всего: «В зависимости от того, какая страница останется в поиске, адрес документа может измениться».

И оговорка, про которую в топе нет ни слова: группа может не собраться вовсе — «страницы могут не объединяться в группу и участвовать в поиске как разные документы».

02Что сайт теряет из-за дублей — и что Яндекс прямо называет нормой

Справка «Чем плохи дубли» перечисляет следствия без драматизма. Робот «индексирует вместо одной страницы несколько», «на обход дублей тратится время и ресурсы сайта и Поиска», «Новые страницы могут индексироваться медленнее», «Дубли могут конкурировать между собой в поиске». Пятый пункт — тот, из-за которого дублями стоит заниматься: «Робот может посчитать дублем и исключить из поиска страницу, которая является целевой».

А теперь то, чего не приводит ни одна страница топа. Про страницы, исключённые алгоритмом как малоценные, справка Яндекса говорит прямо: «Если у сайта есть такие страницы, это не означает, что у него есть нарушения и ограничения в ранжировании», «Число исключенных таким образом страниц негативно не влияет на ранжирование сайта», «Действия алгоритма не являются ограничениями для сайта в поиске» и «У Яндекса нет квот на количество страниц, попадающих в индекс». Google формулирует ещё определённее: дубли «не являются ошибкой и не нарушают правила Google в отношении спама».

Разница принципиальная для решения, которое вы принимаете. Дубли — это не штраф и не санкция, а потеря управляемости: вы не выбираете, какой адрес покажут человеку, и не знаете, не вылетела ли из поиска нужная страница вместо ненужной. Срочность у такой задачи средняя, но откладывать её на год не стоит.

03Три статуса в Вебмастере, которые принимают за одно и то же

В разделе «Индексирование» → «Страницы в поиске» → «Исключенные страницы» Вебмастер показывает 13 статусов исключения. Три из них читаются как синонимы, а означают разные вещи, и лечатся по-разному.

Связь между первым и третьим статусом справка проговаривает открыто: «Страница может быть признана малоценной, если она является дублем или не содержит видимый роботу контент», и дальше — «из-за схожести контента страницы могут конкурировать между собой в поиске и дублировать друг друга, и одна из них будет наименее востребованной». Проверяет это алгоритм часто: «Алгоритм проверяет все страницы регулярно, почти каждый день».

Отдельно отмечу то, чего в справке нет: статуса «Недостаточно качественная», который кочует по SEO-блогам, в перечне статусов Вебмастера я не нашёл. Если видите его в отчёте подрядчика — скорее всего, имелась в виду «малоценная или маловостребованная». Про весь перечень причин я писал, почему страница может вообще не попасть в поиск и где Вебмастер называет причину, — дубль там только один пункт из восьми.

04Что показали 11 статей топа по запросу «дубли страниц»

Замер я делал по одной схеме: открыть страницу, выписать все H2 по порядку, посчитать таблицы и проверить каждое число на ссылку.

Самое показательное — не числа без ссылок, а то, чего в топе нет. Нет инструмента «Настройка GET-параметров», который Яндекс открыл 11.12.2025: самая свежая страница топа обновлялась в августе 2025 и физически не могла о нём знать. Нет ни слова про Тильду, хотя совет «пропишите Clean-param» там невыполним. Нет дословной позиции Яндекса про слеш на конце адреса, которая половину советов топа отменяет. И нет ни одной успокаивающей цитаты первоисточника — весь топ работает в режиме «убийца позиций».

05Шесть случаев из справки: откуда берутся дубли

Справка Яндекса разбирает причины по подразделам, с примерами адресов. Я свёл их в таблицу и добавил, что по каждому случаю рекомендует сама справка.

Из таблицы видно, что универсального средства нет: на главную — редирект, на метки — Clean-param, на AMP — canonical. Если вам приносят план работ, в котором все дубли чинятся одним способом, это повод спросить почему. А если вы хотите, чтобы техническую часть кто-то забрал целиком, я беру разбор индексирования сайта с приведением адресов к одному виду — с правками robots.txt, редиректов и канонических адресов, после которых в Вебмастере видно, что именно изменилось.

06Слеш на конце адреса — не дубль, и canonical здесь не помогает

Этот раздел стоит отдельно, потому что совет из топа здесь прямо противоречит справке. Яндекс пишет: «Яндекс индексирует ссылки со слешем на конце и без одинаково» и «Поисковая система распознает страницы http://example.com и http://example.com/ как одинаковые».

И дальше — предупреждение, которого нет ни в одной статье топа: «Не рекомендуем в этом случае использовать атрибут rel=canonical, так как он может игнорироваться». То есть ровно тот инструмент, который чаще всего советуют для слешей, справка для этого случая отговаривает применять. Если привести адреса к одному виду всё-таки хочется — ради единообразия ссылок и аналитики, — делается это редиректом: «При редиректе пользователи будут попадать сразу на нужный URL страницы».

Соседний случай, который путают со слешами, — зеркала: сайт открывается и с www, и без, и по http, и по https. Директива Host, которой это решали раньше, больше не работает: «мы отказываемся от директивы Host», «Теперь эту директиву можно удалять из robots.txt», «её можно удалить из robots.txt или оставить, робот её просто игнорирует». Вместо неё — постраничный 301, и Яндекс предупреждает про срок: «Главное зеркало сменится в течение нескольких недель». В том, как именно ставится постраничный 301 и что ломается при переезде, есть одна ловушка, на которой спотыкаются чаще всего: редирект ведут не на соответствующую страницу нового адреса, а на главную — и тогда сам Яндекс просит «Старайтесь, чтобы все страницы старого сайта вели на соответствующие страницы нового, а не просто на главную».

07GET-параметры: Clean-param, его три ограничения и новый инструмент Вебмастера

Самый частый источник дублей у обычного сайта — метки. Блог Яндекса объясняет разницу в одну строку: «Если GET-параметр влияет на содержание страницы — это не дубль», «А если GET-параметр не меняет контент страницы, то этот параметр называют незначащим». И дальше: «Самый частый случай появления дублей из-за незначащих параметров — метки для задач веб-аналитики. Например, utm_source, utm_medium, from».

Классический ответ — директива Clean-param в robots.txt: «Робот Яндекса, используя эту директиву, не будет многократно перезагружать дублирующуюся информацию» и «Робот Яндекса сведет все адреса страницы к одному». У неё три ограничения, которые стоит знать до того, как вы попросите подрядчика её прописать:

1. Длина правила — 500 символов. Дословно: «Действует ограничение на длину правила — 500 символов». Лимита на количество директив в справке нет.
2. Строка User-agent: * игнорируется. Дословно: «При этом строка User-agent: * будет проигнорирована». Это самая частая ошибка внедрения, и в текстах топа она не встретилась мне ни разу.
3. Disallow перебивает Clean-param. Дословно: «Исполнение Disallow при этом имеет приоритет» и «Не указывайте директиву Disallow для страниц, если хотите только удалить из поиска варианты ссылок с GET-параметрами».

Почему справка предпочитает Clean-param запрету: «Рекомендуем использовать Clean-param, так как эта директива позволяет передавать основному URL» накопленные показатели, тогда как при запрете «поиск Яндекса не будет получать никаких сигналов с запрещенных страниц». Часть параметров Яндекс убирает сам: «Некоторые параметры, например, большинство UTM-меток, удаляются поисковой системой автоматически», «Для таких параметров не требуется дополнительных действий в robots.txt».

А 11 декабря 2025 года Яндекс добавил то, из-за чего весь топ по этой теме устарел. В Вебмастере появился раздел «Индексирование» → «Настройка GET-параметров»: «В нём можно указать, какие параметры учитывать при индексации, а какие нет», «Ознакомьтесь со списком GET-параметров, которые робот обнаружил на вашем сайте», «Новые параметры можно задать значимым или не значимым на весь сайт, главную страницу или раздел сайта». Правка robots.txt для этого не нужна — и анонс прямо называет, зачем это сделано: «В некоторых случаях такую директиву невозможно добавить из-за особенностей систем управления».

Что важно знать про новый инструмент: «Параметры, найденные роботом, нельзя удалить, но можно указать, учитывать ли их при индексировании», «Внесенные изменения вступят в силу в течение недели», а при конфликте с robots.txt «поисковый робот станет выполнять то правило, которое запрещает индексировать URL с GET-параметром». Старый способ при этом никуда не делся: «поддержка директивы clean-param в файле robots.txt остается без изменений». Если идти через файл, то 15 проверок robots.txt на живых примерах покажут заодно, не закрыто ли у вас лишнего: в том замере 22 живых файлов попадались запреты на страницы услуг и контактов, которые владелец закрывать явно не собирался.

08Canonical — рекомендация, а не команда: что говорят Яндекс и Google

Про rel="canonical" в справке Яндекса есть фраза, которую стоит прочитать дважды: «Робот Яндекса воспринимает указание на канонический адрес как рекомендацию». Не команду. И дальше условие, когда рекомендацию не послушают: «Робот игнорирует указания, если содержимое канонической страницы значительно отличается».

Случаи, когда атрибут не учитывается, справка перечисляет списком: канонический адрес указан в другом домене или поддомене; «Указана цепочка канонических адресов»; «Указано несколько канонических адресов»; канонический адрес недоступен роботу и перенаправляет на другую страницу. Отдельно: «Указывайте канонический адрес в пределах одного домена».

У Google логика та же, но слова другие. Канонический URL — это «URL страницы, которую роботы Google считают главной среди нескольких ее вариантов», а ваш сигнал остаётся сигналом: «вы можете указать предпочитаемую каноническую страницу, но делать это вовсе не обязательно» и «мы по той или иной причине можем выбрать другую».

И одно прямое предупреждение Google, которое противоречит частому совету «закрой дубли в robots.txt»: «Не используйте для нормализации файл robots.txt», потому что «Google может индексировать URL, запрещенные в файле robots.txt, без их контента».

Разберём именно
ваш сайт бесплатно

Посмотрю страницу и рекламу, найду,
где теряются заявки, и пришлю план,
что поменять.

Что входит в разбор

• 1
  Где теряются заявкипуть от объявления до формы
• 2
  Что поправить на сайтепервый экран, оффер, формы
• 3
  Что поменять в рекламезапросы, объявления, бюджет

Михаил Лапошинразберу ваш проект лично

Ваше имяТелефонСайт

TelegramWhatsAppЗвонок

Согласен на обработку данных и политику конфиденциальностиПолучить бесплатный разбор

✓ Заявка принята — отвечу в течение часа

09Пагинация: Яндекс и Google советуют противоположное

Вот развилка, которой нет ни у кого в топе, хотя для интернет-магазина она важнее всего остального.

Google: «Не используйте первую страницу с результатами поиска в качестве канонической», «Вместо этого назначайте каждой странице ее собственный» канонический URL, «поскольку Google рассматривает каждую страницу, полученную при разбивке результатов поиска, как отдельную». Про старую разметку rel="prev"/"next" там же сказано: «Сейчас Google их игнорирует, но они могут использоваться другими поисковыми системами».

Яндекс в блоге Платона Щукина советует ровно обратное: если на страницы пагинации нет трафика и их содержимое во многом совпадает, «советую настраивать атрибут rel="canonical" тега на подобных страницах», «делать страницы второй, третьей и дальнейшей нумерации неканоническими» и «указывать первую страницу каталога, только она будет участвовать в результатах поиска». Про сортировки отдельно: «их лучше закрыть с помощью соответствующих правил в Вашем robots.txt».

Здесь нужна честная оговорка, которую я не могу обойти: совет Яндекса — это пост в блоге от 29.12.2015, а действующей справочной страницы Яндекса именно про пагинацию я не нашёл. Искал в «Дублировании страниц», «Чем плохи дубли», «Каноническом адресе страницы» и «Почему страницы исключены из поиска». Поэтому практический вывод такой: решение по пагинации принимается под ту поисковую систему, из которой у вас идёт трафик, и проверяется по факту — по отчёту «Страницы в поиске», а не по статье.

10Тильда, Битрикс и WordPress: где совет «пропишите Clean-param» неисполним

Шесть страниц топа и больше советуют прописать Clean-param в robots.txt. На Тильде это сделать нельзя. Официальный ответ справки Тильды на вопрос о редактировании robots.txt: «К сожалению, в данный момент такой возможности в Тильде нет». Единственный штатный способ закрыть страницу от поиска там — галочка «Запретить поисковикам индексировать эту страницу» в настройках страницы, раздел «Facebook & SEO». Про дубли в SEO-гиде Тильды сказано только общее: «Если одно и то же содержание расположено на страницах с разными адресами, одна из страниц должна быть канонической».

Отсюда прямой вывод для сайтов на конструкторе: работают два пути — канонические адреса средствами платформы и новый инструмент «Настройка GET-параметров» в Вебмастере. Ровно тот случай, который Яндекс и описал словами «невозможно добавить из-за особенностей систем управления».

По Битриксу честный ответ короткий: отдельной страницы официальной документации 1С-Битрикс про дубли главной с /index.php и про канонические адреса я не нашёл — страница настроек SEO в разделе помощи отдаёт 404, урок курса про основную страницу среди дублей открывается как общая страница курса. Всё остальное по Битриксу в выдаче — форумы и сторонние блоги, а не справка.

По WordPress в официальных источниках есть две функции, и обе про наш случай. redirect_canonical() — «Redirects incoming links to the proper URL based on the site url», и там же названа цель: «This SEO enhancement prevents penalty for duplicate content by redirecting all incoming links to one or the other». А rel_canonical() «Outputs rel=canonical for singular queries» — и по приведённому на той же странице коду видно, что для архивов, категорий, тегов и страниц пагинации этой функцией canonical не выводится. Прямой фразы об этом в документации нет, это следствие кода, и подавать это иначе было бы неправдой.

11Чем искать дубли и сколько это стоит

Цены — со страниц тарифов на 8 октября 2026 года. Бесплатного пути хватает большинству сайтов малого бизнеса, и начинать стоит с него.

Одна из страниц топа называет Screaming Frog за «199 евро в год», тогда как на странице тарифов вендора 8 октября 2026 года стоит $279 в год. Это обычная судьба цен в статьях без даты обращения — и причина, по которой у каждой цифры здесь дата стоит. Про Labrika честно скажу, что цену назвать не могу: на странице тарифов она подгружается скриптом и в текст не попадает.

Если у вас уже есть выгрузка из любого из этих инструментов и непонятно, что с ней делать, можно сверить, что из этого списка действительно дубли на вашем сайте, а что робот уже склеил сам и трогать не нужно.

12Сколько ждать и что делать, если дубль определён по ошибке

Срок снятия статуса «Дубль» в справке Яндекса не назван числом — это я проверил по семи разделам справки. Есть только формулировка «Уведомление пропадет, когда робот узнает об изменениях». Числа есть у соседних процессов, и именно на них стоит ориентироваться: переобход конкретных адресов — «Этот процесс занимает не более трех дней, но обычно завершается быстрее», обновление данных в отчётах — «Данные обновятся в течение двух недель», настройки GET-параметров — «Внесенные изменения вступят в силу в течение недели». Запрещённые в robots.txt адреса, по словам Платона Щукина, выпадают «в течение одной-двух недель».

Проверять результат надо в том же месте, где увидели проблему: «Индексирование» → «Страницы в поиске», фильтр по статусу. Через две недели после правок число адресов со статусом «Дубль» должно уменьшиться, а нужная страница — остаться в разделе «Все страницы». Если вы не привыкли читать эти отчёты, рядом полезно понимать, что Яндекс вообще считает позицией сайта и почему увиденное в браузере не замер, — иначе легко принять за результат обычные колебания выдачи.

И последнее, чего нет ни у одной страницы топа. Робот может ошибиться, и у Яндекса на этот случай есть отдельный раздел справки под названием «Разгруппировка», а в тексте — прямая фраза: «Если страница определена как дубль по ошибке, следуйте указаниям в разделе». То есть группу дублей можно расцепить, если страницы на самом деле разные. Способ при этом ровно один и он не технический: «Единственно правильное решение это сделать их значительно отличающимися». Для карточек товаров, отличающихся одним параметром, и для отраслевых страниц, собранных подстановкой слова, это и есть настоящий ответ — не настройка, а разный текст.

Михаил ЛапошинМаркетолог, руководитель Laposhin Agency

«Делаем сайты и запускаем Яндекс Директ так, чтобы
сайт приносил заявки, а не просто был»

Есть вопрос по статье?Задать вопрос в Telegram