Страницы-сироты (Orphan Pages): как найти и исправить — SEO

Техническое SEO · разбор

Страницы-сироты: как их найти и вернуть в структуру сайта

Страница открывается, отдаёт 200 и лежит в XML Sitemap — но на неё не ведёт ни одна внутренняя ссылка. Разбираем, откуда берутся такие URL, почему Google их не индексирует и что с ними делать: диагностика, готовые скрипты, матрица решений и сроки проверки.

Александр СиновSEOProf74≈ 20 минут чтения13 разделов

Граф связей между страницами сайта: узлы-ссылки и один изолированный URL без входящих ссылок
Граф внутренних ссылок: у изолированного узла нет ни одного входящего ребра
1 290 → 640 столько адресов-кандидатов нашли в модельном аудите магазина — и лишь столько из них потребовали реального решения

Страница есть, а на неё никто не ссылается

Страница опубликована, открывается в браузере, возвращает HTTP 200 и даже присутствует в XML Sitemap. Но есть проблема: на неё не ведёт ни одна внутренняя ссылка с других страниц сайта.

Такие URL называются страницами-сиротами (Orphan Pages). Они существуют отдельно от основной структуры сайта и не имеют нормального пути обнаружения через внутреннюю перелинковку.

Для поисковых систем это может стать серьёзной проблемой. Google способен обнаружить страницу через sitemap, внешнюю ссылку или другие источники, но отсутствие внутренних ссылок затрудняет её обнаружение, повторное сканирование и оценку значимости в структуре сайта.

Особенно часто проблема встречается на крупных интернет-магазинах, информационных порталах и сайтах, которые неоднократно меняли структуру, переносили разделы или удаляли категории.

Коротко о главном

  • Сирота ≠ запрет индексации. Отсутствие внутренних ссылок не говорит Google «не индексируй», но ухудшает обнаружение, обход и передачу внутренних ссылочных сигналов.
  • Краулер не найдёт то, что неlinked. Обычный обход идёт от главной по ссылкам, поэтому «просто прогнать Screaming Frog» недостаточно.
  • Нужен набор источников. Sitemap, Search Console, аналитика, логи, CMS и внешние ссылки — каждого по отдельности мало, но вместе они дают полную картину.
  • Не все найденные URL — проблема. Из тысячи «сирот» реальную ценность могут иметь 100–300: остальные — дубли, редиректы и технический мусор.
  • Решение — не массовые ссылки. Для каждого адреса нужна своя стратегия: вернуть в структуру, объединить, удалить, перенаправить или закрыть от индексации.
Дашборд веб-аналитики с таблицей URL, показов и кликов, по которому ищутся страницы с трафиком, но без внутренних ссылок
Аналитика показывает реальные посадочные страницы — часть из них может не быть связана с остальным сайтом.
АвторАлександр Синов
СтудияSEOProf74
Объём13 разделов · 4 скрипта и формулы
Что внутриДиагностика · решения · сроки

01Что такое страницы-сироты (Orphan Pages)

Страница-сирота — это URL, который не имеет входящих внутренних ссылок с других страниц сайта.

Представим обычную структуру интернет-магазина:

Пользователь может последовательно переходить между разделами и в конечном итоге попадать на нужную страницу товара. Но иногда происходит другая ситуация: карточка товара опубликована, доступна по прямому URL, присутствует в CMS и даже добавлена в XML Sitemap, однако ни одна категория, подборка или другая страница сайта на неё не ссылается.

Получается, что страница существует, но выпала из внутренней архитектуры.

ПараметрПример значения
URL/catalog/product-458/
HTTP-ответ200 OK
В XML SitemapДа
Внутренние входящие ссылки0
CanonicalНа саму страницу
Индексация GoogleНет
Внешние ссылкиНет

Такой URL можно считать кандидатом в страницы-сироты.

Важный нюанс

Отсутствие ссылок не означает, что поисковая система вообще не знает о существовании страницы. Если адрес есть в sitemap или на него ссылается другой сайт, Google может обнаружить его независимо от внутренней перелинковки.

Поэтому при техническом аудите необходимо различать две ситуации:

  1. Страница действительно недоступна через внутреннюю ссылочную структуру.
  2. Страница не обнаружена конкретным краулером из-за ограничений настроек обхода, JavaScript, авторизации или других особенностей сайта.

02Почему страницы-сироты появляются

Обычно такие URL возникают не из-за одной серьёзной технической ошибки, а вследствие постепенного изменения структуры сайта.

2.1. Изменение структуры сайта

После редизайна или переработки каталога разработчики могут удалить старые категории, изменить меню или переместить страницы. При этом сами URL продолжают открываться. Например, раньше товар находился в категории /catalog/tools/drills/product-458/, а после изменения структуры каталог стал выглядеть так: /catalog/power-tools/drills/. Старая карточка осталась опубликованной, но ссылки на неё из прежнего раздела больше нет.

2.2. Удаление категорий и разделов

Если категория удаляется без предварительной проверки входящих ссылок, её дочерние страницы могут потерять единственный путь обнаружения. Особенно опасна ситуация, когда одновременно удаляются:

  • ссылки из меню;
  • ссылки из категорий;
  • блоки рекомендаций;
  • ссылки из статей;
  • хлебные крошки.

При этом URL товаров продолжают возвращать HTTP 200.

2.3. Ошибки после SEO-миграции

При переносе сайта на новую CMS или изменении URL-структуры часть страниц может не попасть в новую архитектуру. Старые URL иногда продолжают работать, но соответствующие им новые страницы не получают внутренних ссылок. Поэтому после миграции необходимо проверять не только редиректы, canonical и sitemap, но и сохранение ссылочной структуры.

Подробнее о рисках переноса можно прочитать в материале «SEO-миграция сайта без потери трафика».

2.4. Снятие товаров с продажи

В интернет-магазинах нередко встречается следующая ситуация: товар закончился, карточку убрали из категории, но саму страницу оставили доступной. Если товар больше не продаётся, но URL продолжает отвечать HTTP 200, необходимо определить, имеет ли страница самостоятельную ценность. Например, карточка может содержать полезные характеристики, отзывы, инструкции и получать органический трафик. В таком случае её необязательно удалять.

2.5. Ошибки при публикации контента

Контент-менеджер создал новую статью, опубликовал её, но забыл добавить ссылку из тематического раздела или других материалов. В результате статья существует, но не включена в контентную архитектуру сайта.

2.6. Посадочные страницы для рекламных кампаний

Некоторые страницы специально создаются отдельно от основного каталога: посадочные страницы для контекстной рекламы, акций или отдельных рекламных кампаний. Отсутствие внутренних ссылок в таком случае может быть осознанным решением. Такие URL не нужно автоматически добавлять в основную структуру сайта — сначала следует определить, должны ли они вообще участвовать в органическом поиске.

03Почему страницы-сироты могут не попадать в индекс Google

Отсутствие внутренних ссылок — не самостоятельная директива для исключения URL из индекса. Google может обнаружить страницу другими способами. Однако внутренняя перелинковка выполняет сразу несколько важных функций:

  • помогает поисковым роботам обнаруживать новые URL;
  • передаёт внутренние ссылочные сигналы;
  • формирует взаимосвязи между тематическими разделами;
  • помогает понять назначение и относительную важность страниц;
  • обеспечивает пользователям навигацию по сайту.

Если страница-сирота не присутствует в sitemap, не имеет внешних ссылок и не обнаруживается через другие источники, поисковый робот может вообще не узнать о её существовании. Если же URL известен Google, но не имеет внутренних ссылок, это ещё не гарантирует его индексацию.

Дополнительные причины могут включать:

Недостаточная самостоятельная ценность контента

Страница содержит мало полезной информации, повторяет другие документы или не отвечает на самостоятельный пользовательский запрос.

Дублирование

Несколько URL содержат практически одинаковые материалы, а Google выбирает другой адрес в качестве canonical.

Ошибки canonical

На странице указан canonical, ведущий на другой URL.

Технические ограничения

Страница закрыта через noindex, требует авторизации, имеет ошибки ответа сервера или неправильно настроенный robots.txt.

Слабая архитектура сайта

Даже если формально несколько ссылок существуют, страница может находиться слишком глубоко в структуре и получать мало внутренних ссылочных сигналов.

Низкая приоритетность URL

Поисковая система может не считать необходимым индексировать определённую страницу, несмотря на возможность её сканирования.

Не смешивайте три этапа

Обнаружение URL, сканирование страницы и включение документа в индекс — это разные процессы. Успешное прохождение одного этапа не гарантирует прохождения следующего. Страница может быть обнаружена, но не просканирована — и наоборот.


04Как найти страницы-сироты на сайте

Одна из наиболее распространённых ошибок при поиске orphan pages — запуск краулера и попытка найти все проблемные URL только по результатам одного обхода.

Обычный краулер начинает работу с главной страницы и переходит по обнаруженным внутренним ссылкам. Если URL не связан с этой структурой, он просто не попадёт в список найденных страниц. Поэтому для полноценной диагностики необходимо сопоставлять результаты краулинга с дополнительными источниками адресов.

  1. Выполнить полный краулинг сайта

    Для начала необходимо получить список URL, доступных через текущую внутреннюю ссылочную структуру. Для этого можно использовать Screaming Frog SEO Spider.

    Рекомендуемые параметры проверки:

    • Crawl Internal Links — включён;
    • Crawl Linked XML Sitemaps — включён;
    • JavaScript Rendering — при необходимости отдельный дополнительный обход;
    • Crawl Canonicals — включён;
    • Crawl Pagination — с учётом особенностей сайта;
    • Include Subdomains — если поддомены входят в область аудита.

    После завершения обхода необходимо выгрузить список внутренних HTML-страниц. Для каждой страницы желательно сохранить:

    ПараметрДля чего нужен
    URLАдрес страницы
    Status CodeПроверка HTTP-ответа
    IndexabilityВозможность индексирования
    Canonical URLПроверка канонического адреса
    InlinksКоличество входящих внутренних ссылок
    Crawl DepthГлубина страницы
    Content TypeТип документа
    TitleИдентификация страницы

    Особое внимание стоит уделить страницам с нулевым количеством входящих ссылок и пустой глубиной обхода.

    Ноль в отчёте ≠ ноль на сайте

    Нулевое число ссылок в конкретном отчёте не всегда означает абсолютное отсутствие ссылок на сайте. Необходимо учитывать настройки краулера и типы ссылок, которые он обрабатывает.

  2. Проверить XML Sitemap

    Следующий источник — XML-карта сайта. Необходимо получить полный список URL, которые сайт сообщает поисковым системам как важные или доступные для обнаружения. Сопоставляем два списка: URL, обнаруженные краулером, и URL, присутствующие в XML Sitemap.

    Если адрес есть в sitemap, но отсутствует в результатах обычного обхода, он становится кандидатом на дополнительную проверку.

    URLВ SitemapНайден краулером
    /blog/seo-audit/ДаДа
    /catalog/product-458/ДаНет
    /catalog/product-512/ДаДа
    /blog/old-guide/ДаНет

    В данном примере два адреса требуют проверки. Но пока нельзя утверждать, что оба являются полноценными страницами-сиротами. Возможно, один URL является редиректом, другой закрыт от обхода или относится к отдельной языковой версии.

  3. Использовать Google Search Console

    Search Console позволяет получить информацию об URL, которые уже известны Google. Для диагностики пригодятся:

    • отчёт «Страницы» в разделе индексирования;
    • проверка отдельных URL через URL Inspection;
    • отчёт об эффективности;
    • данные о страницах, получающих показы и клики.

    Особенно интересны URL, которые:

    • присутствуют в индексе, но не встречаются в обычном краулинге;
    • получают показы и клики, но не имеют входящих внутренних ссылок;
    • находятся в sitemap, но не индексируются;
    • ранее индексировались, но после изменения структуры потеряли видимость.

    Сама по себе Search Console не предоставляет универсального отчёта со всеми страницами-сиротами. Её данные необходимо сопоставлять с результатами краулинга. Для дополнительной проверки можно использовать URL Inspection и смотреть известный Google статус URL, выбранную canonical и сведения о последнем сканировании.

  4. Проверить данные веб-аналитики

    Ещё один источник — посадочные страницы, на которые пользователи реально приходят. Например, в Google Analytics 4 можно получить список страниц входа за выбранный период. Если URL получает посещения, но не обнаруживается краулером, его стоит проверить отдельно.

    Возможные объяснения:

    • страница имеет внешние ссылки;
    • пользователи переходят на неё из рекламных кампаний;
    • URL сохранён в закладках;
    • на него ведут ссылки из рассылок;
    • страница действительно выпала из внутренней архитектуры.

    Необходимо учитывать, что GA4 показывает только посещения, зарегистрированные аналитикой. Отсутствие URL в отчёте не означает, что на страницу никто не переходит.

  5. Проверить серверные логи

    Анализ логов позволяет увидеть, какие URL действительно запрашивали поисковые роботы. Для каждой записи желательно получить:

    • URL запроса;
    • дату и время;
    • User-Agent;
    • HTTP-код ответа;
    • IP-адрес;
    • количество обращений;
    • конечный адрес после редиректа, если он фиксируется.

    Особенно интересны URL, которые Googlebot регулярно запрашивает, но которые отсутствуют в обычном краулинге. Это может указывать на то, что поисковая система знает об адресе из другого источника.

    User-Agent не равен Googlebot

    Строка User-Agent сама по себе не доказывает, что запрос действительно выполнил Googlebot. Для подтверждения необходимо проверять подлинность поискового робота по IP и официальным рекомендациям Google.

    Подробнее о работе с логами можно прочитать в статье Log File Analysis: анализ серверных логов для SEO.

  6. Получить список опубликованных страниц из CMS

    Для крупных сайтов полезно выгрузить список всех опубликованных материалов непосредственно из CMS или базы данных. Это позволяет обнаружить страницы, которые:

    • опубликованы, но не попали в sitemap;
    • не встречаются в результатах краулинга;
    • отсутствуют в отчётах аналитики;
    • были созданы давно и больше не используются;
    • остались после удаления категорий или разделов.

    В идеале следует получить: URL, ID записи, тип страницы, статус публикации, дату создания, дату последнего изменения, родительскую категорию и наличие canonical.

    Так можно обнаружить не только страницы-сироты, но и другие нарушения архитектуры сайта.

Из чего складывается полная картина

CКраулинг сайта SXML Sitemap GSearch Console AВеб-аналитика LСерверные логи MБаза CMS BВнешние ссылки
Orphan candidates = (S ∪ G ∪ A ∪ L ∪ M ∪ B) − C

Один источник показывает лишь часть картины. Кандидат — это URL, который есть хотя бы в одном дополнительном источнике, но не найден обычным краулингом. Дальше его нужно проверить вручную: HTTP-код, canonical, реальные входящие ссылки и ценность страницы.

Как не принять обычную страницу за сироту

Ложные срабатывания — самая частая ошибка на первом проходе. Если краулер настроен неверно, «сиротами» окажутся совершенно нормальные страницы:

СимптомВероятная причинаКак проверить
0 входящих ссылок, но страница в менюСсылка рендерится JavaScript-ом, краулер без JS-рендеринга её не увиделПовторный обход с JavaScript Rendering
Страница есть в интерфейсе, но не в отчётеСсылка обёрнута в <noscript> или в клиентский обработчик без hrefПросмотр исходного кода и рендер в браузере
URL в sitemap, но не в обходеСтраница закрыта паролем, фильтром или правилом robots.txtПроверка HTTP-ответа и robots.txt
Страница найдена только как PDF или DOCДокумент не является HTML-страницейПроверка Content Type в отчёте
Ссылка есть, но в картинкеСсылка в атрибуте usemap или в <area>Поиск по HTML карты изображения
Много похожих URL с параметрамиФильтры, сортировки, пагинацияСравнение параметров и canonical
Страница есть в логах, но не в краулингеЗапрос пришёл от подделанного User-Agent или из внешнего источникаПроверка IP по спискам Google

Практическое правило: прежде чем записывать адрес в отчёт как сироту, откройте его и посмотрите исходный HTML. Девять из десяти «неожиданных» случаев объясняются настройками краулера, а не архитектурой сайта.

Быстрый фильтр в отчёте Screaming Frog

После выгрузки отчёта в CSV отфильтруйте строки по трём условиям одновременно:

Status Code = 200 Indexability = Indexable Inlinks = 0

Именно пересечение трёх фильтров отсекает редиректы, служебные страницы и запрещённые к индексации документы. Остаток — рабочий список кандидатов, с которым уже можно работать.

05Как объединить данные и получить список страниц-сирот

Наиболее надёжный подход — объединить результаты нескольких источников в одну таблицу. Обозначим: C — URL, найденные обычным краулингом; S — URL из XML Sitemap; G — URL из Google Search Console; A — URL из веб-аналитики; L — URL из серверных логов; M — URL из CMS; B — URL, обнаруженные через внешние ссылки.

Формула кандидатов
Orphan candidates = (S ∪ G ∪ A ∪ L ∪ M ∪ B) − C

Это не готовый список подтверждённых страниц-сирот. Это список URL, которые требуют проверки. Перед окончательной классификацией необходимо:

  1. Нормализовать URL.
  2. Убрать дубли с разными вариантами слешей и протоколов.
  3. Проверить редиректы.
  4. Исключить технические адреса и параметры.
  5. Проверить HTTP-коды.
  6. Проверить canonical.
  7. Проверить реальные входящие внутренние ссылки.
  8. Установить, должна ли страница участвовать в органическом поиске.

Для автоматизации можно использовать Google Sheets, Excel, Python или специализированные SEO-инструменты. Ниже — две готовые заготовки, которые экономят часы ручной работы.

Готовые формулы для Google Sheets

Создайте по вкладке на каждый источник: «Краулинг», «Sitemap», «GSC», «GA4», «Логи», «CMS». В колонке A каждой вкладки — URL, в колонке B основной лист — сводный результат.

Google Sheets · нормализация URL
=SUBSTITUTE(SUBSTITUTE(SUBSTITUTE(LOWER(A2), "https://seoprof74.ru",""), "http://",""), "//","/")
Google Sheets · флаг «кандидат в сироты»
=ЕСЛИ(СЧЁТЕСЛИ(Краулинг!$A:$A;$A2)>0;""; ЕСЛИ(ИЛИ( СЧЁТЕСЛИ(Sitemap!$A:$A;$A2)>0; СЧЁТЕСЛИ(GSC!$A:$A;$A2)>0; СЧЁТЕСЛИ(GA4!$A:$A;$A2)>0; СЧЁТЕСЛИ(Логи!$A:$A;$A2)>0; СЧЁТЕСЛИ(CMS!$A:$A;$A2)>0); "Кандидат";"")))

Формула нормализации убирает протокол, домен и дублирующие слеши, поэтому /catalog/a// и /catalog/a/ попадут в одну и ту же ячейку. Формула-флаг возвращает «Кандидат» только тем URL, которых нет в отчёте краулинга, но которые подтверждены хотя бы одним другим источником.

Тот же список на Python

Если данные уже выгружены в CSV, пересечение считается в несколько строк кода:

Python · поиск пересечения
# urls.csv: колонка url + колонка source import csv from collections import defaultdict sources = defaultdict(set) with open('urls.csv', encoding='utf-8') as f: for row in csv.DictReader(f): url = row['url'].strip().lower().rstrip('/') sources[row['source']].add(url) crawl = sources.get('crawl', set()) extra = set().union(*[v for k, v in sources.items() if k != 'crawl']) for url in sorted(extra - crawl): print(url)

Скрипт печатает только те адреса, которые подтверждены дополнительными источниками, но не найдены краулингом. На выходе — готовый список кандидатов, который можно импортировать в таблицу решения.

В простой таблице удобно сделать следующие столбцы:

URLCrawlSitemapGSCGA4LogsHTTPInlinksРешение
/blog/article-1/НетДаДаДаДа2000Восстановить ссылки
/product/458/НетДаНетНетНет2000Проверить ценность
/old-campaign/НетНетНетДаДа2000Удалить или закрыть
/catalog/category-5/ДаДаДаДаДа2003Не сирота

06Практический пример: аудит интернет-магазина

Рассмотрим условный интернет-магазин строительных материалов. В каталоге размещено около 12 000 URL, включая категории, подкатегории, карточки товаров и информационные страницы. После обычного краулинга получены следующие результаты:

ПоказательЗначение
URL, найденные краулером10 850
URL в XML Sitemap11 700
URL из Google Search Console9 430
URL с посещениями по GA44 820
URL из CMS12 140

После объединения и нормализации списков обнаружено 1 290 адресов, которые присутствуют хотя бы в одном дополнительном источнике, но не найдены обычным краулингом.

Стеллажи склада интернет-магазина с тысячами карточек товаров, часть из которых осталась вне внутренней структуры ссылок
Один из участников модельного аудита: каталог на 12 000 URL, где часть карточек товаров осталась вне структуры внутренних ссылок.

Из чего состояли 1 290 кандидатов

Действующие страницы товаров без внутренних ссылок410
Старые страницы товаров285
Страницы категорий после изменения структуры135
Информационные статьи без перелинковки95
Редиректы и удалённые URL160
Технические адреса и дубли205
Требуют решения по контенту Технический мусор, чинится автоматически

Из 1 290 адресов только 640 оказались действующими страницами, для которых необходимо было принять отдельное решение. Дальнейшая проверка показала:

  • 260 страниц товаров имели самостоятельную ценность и должны были остаться в индексе;
  • 120 страниц содержали дублирующую информацию и требовали объединения;
  • 145 страниц устарели и больше не имели самостоятельной ценности;
  • 115 страниц нуждались в дополнительной технической проверке.

После классификации был составлен план работ. Для 260 ценных страниц восстановили ссылки из соответствующих категорий и тематических материалов. Для 120 дублей объединили полезную информацию с основными страницами и настроили релевантные 301-редиректы. Для 145 устаревших URL приняли решение об удалении или перенаправлении в зависимости от наличия равноценной замены. Оставшиеся 115 адресов передали на дополнительную проверку canonical, HTTP-ответов, индексации и истории публикаций.

Важно

Все показатели в примере условные. Это демонстрационная модель аудита, а не реальный клиентский кейс.

Главный вывод: обнаружить тысячу URL без внутренних ссылок — ещё не значит получить тысячу SEO-проблем. Сначала необходимо определить, какие из них действительно должны участвовать в поиске.

07Что делать с найденными страницами-сиротами

После диагностики не стоит автоматически добавлять ссылки на все обнаруженные URL. У каждой страницы должна быть своя стратегия.

Сценарий 1. Страница полезная и должна индексироваться

Это наиболее простой случай. Если страница содержит самостоятельную ценность, отвечает на поисковый запрос и должна получать органический трафик, её необходимо вернуть в структуру сайта. Что сделать:

  • добавить ссылку из релевантной категории;
  • разместить контекстные ссылки из тематических статей;
  • проверить хлебные крошки;
  • добавить страницу в подходящие блоки рекомендаций;
  • проверить наличие URL в sitemap;
  • убедиться, что canonical указывает на правильный адрес.

Например, есть статья «Как выбрать строительную шпаклёвку», но на неё не ведёт ни одна ссылка из других материалов. Можно добавить контекстную ссылку из статьи о подготовке стен к отделке, а также включить её в тематический раздел блога. Главное — ссылка должна быть полезна пользователю, а не существовать только ради поискового робота.

Сценарий 2. Страница дублирует другой материал

Если обнаружено несколько URL с одинаковым или очень похожим содержанием, необходимо определить основную страницу. Возможные действия: объединить полезную информацию, выбрать основной URL, настроить 301-редирект со старого адреса, проверить canonical, обновить внутренние ссылки, удалить старые URL из sitemap.

/blog/seo-audit-2023/ /blog/seo-audit/

Обе страницы рассказывают об одном и том же, но вторая содержит более актуальную информацию. Если самостоятельной ценности у старой страницы нет, материалы можно объединить, а старый URL перенаправить на актуальный.

Куда нельзя перенаправлять

301-редирект должен вести на действительно релевантную замену, а не на главную страницу сайта.

Сценарий 3. Страница устарела и больше не нужна

Если URL не имеет полезного контента, внешних ссылок, трафика и не представляет ценность для пользователей, его можно удалить. В зависимости от ситуации используют:

  • 404 — страница не найдена;
  • 410 — страница намеренно удалена;
  • 301 — если есть равноценная замена.

Не следует перенаправлять все старые URL на главную или случайную категорию. Это может привести к появлению soft 404 и другим проблемам.

Сценарий 4. Страница нужна, но не должна индексироваться

Например, это может быть отдельная посадочная страница рекламной кампании. Если она нужна пользователям, но не должна участвовать в органическом поиске, можно использовать meta robots noindex.

<meta name="robots" content="noindex, follow">

При этом необходимо убедиться, что поисковый робот может загрузить страницу и увидеть директиву noindex. Если URL заблокирован в robots.txt, поисковая система может не прочитать эту директиву.

noindex и sitemap несовместимы

Страницу с noindex нужно убрать из XML Sitemap — иначе вы отправляете Google противоречивые сигналы: «обнаружение — да, индексация — нет». Проверьте, нет ли таких URL в вашей карте.

Сценарий 5. Страница нужна, но находится слишком глубоко

Не каждая проблема внутренней архитектуры связана с полным отсутствием ссылок. Иногда URL имеет одну входящую ссылку, но находится на пятом или шестом уровне вложенности: Главная → Каталог → Категория → Подкатегория → Подраздел → Товар. В таком случае можно:

  • добавить ссылку из родительской категории;
  • создать тематическую подборку;
  • добавить блок популярных товаров;
  • улучшить структуру хлебных крошек;
  • разместить контекстные ссылки в связанных материалах.

Задача — сделать важные URL доступными через понятные и логичные маршруты.

Матрица решений: что делать с каждым типом адресов

Когда кандидатов сотни, решения удобно принимать по единой логике. Ниже — матрица, которой можно пользоваться прямо в таблице аудита.

Тип адресаЕсть трафик или ссылкиДействиеРиск
Товар или услугаДаВернуть в структуруНизкий
Товар или услугаНетПроверить ценность и спросСредний
Статья или гайдДаСвязать с тематикойНизкий
Дубль или вариантЛюбойОбъединить + 301Низкий
Товар снят с продажиНет410 или 301 на аналогНизкий
Лендинг рекламной кампанииНетЗакрыть noindex, убрать из sitemapНизкий
Технический адрес, фильтрыНетЗакрыть от обходаНужен контроль краулера
Редирект или удалённый URLНетУбрать из sitemap и отчётовНизкий

08Как правильно восстановить внутреннюю перелинковку

При восстановлении ссылок важно учитывать не только количество входящих ссылок, но и их качество. Например, одна контекстная ссылка из тематической статьи может быть полезнее нескольких ссылок из случайных блоков. Рекомендую использовать несколько уровней перелинковки.

Категорийные ссылки

Карточки товаров должны быть доступны из соответствующих категорий и подкатегорий.

Контекстные ссылки

Информационные материалы могут ссылаться на другие статьи, инструкции, услуги и подходящие товарные разделы.

Хлебные крошки

Они помогают пользователям ориентироваться в структуре сайта и создают дополнительные внутренние связи.

Блоки рекомендаций

Подходят для товаров, статей и сопутствующих материалов, если рекомендации действительно релевантны.

Навигационные разделы

Важные страницы должны иметь понятное место в общей архитектуре сайта.

При добавлении ссылок следует использовать обычные HTML-ссылки с атрибутом href:

<a href="/blog/seo-audit/">Как провести SEO-аудит сайта</a>

Google рекомендует использовать доступные для обхода HTML-ссылки с href. Ссылки, реализованные исключительно через обработчики JavaScript или нестандартные элементы, могут обрабатываться ненадёжно.

Практический приём

Чтобы не «забыть» про восстановленные ссылки, добавьте их восстановление в чек-лист публикации: вместе с новым материалом всегда указывается минимум одна ссылка из существующей страницы. Одна минута контент-менеджера экономит недели технической доработки.

09Как проверить результат после исправления

После восстановления перелинковки необходимо провести повторную диагностику. Я бы разделил контроль на несколько этапов.

  1. Этап 1. Проверка ссылок

    Повторно запускаем краулер и проверяем:

    • появились ли входящие ссылки;
    • изменилась ли глубина обхода;
    • корректно ли работают новые ссылки;
    • нет ли циклических редиректов;
    • не появились ли ссылки на несуществующие URL.
  2. Этап 2. Проверка технического состояния

    Проверяем HTTP 200 для страниц, которые должны работать, отсутствие нежелательного noindex, корректность canonical, доступность для Googlebot и актуальность XML Sitemap.

  3. Этап 3. Проверка в Google Search Console

    Используем URL Inspection для приоритетных страниц. Смотрим: известен ли URL Google, когда выполнялось последнее сканирование, какой canonical выбран Google, доступна ли страница для индексирования, присутствует ли она в индексе.

  4. Этап 4. Анализ серверных логов

    Проверяем, появились ли новые обращения Googlebot к восстановленным URL. Необходимо учитывать, что поисковые роботы не обязаны посещать страницы сразу после изменения перелинковки.

  5. Этап 5. Мониторинг поисковой видимости

    Через несколько недель анализируем динамику количества индексируемых страниц, показы и клики в Search Console, изменение органического трафика, динамику запросов и появление новых URL в отчётах индексирования.

Повторная отправка URL не решает проблему

Повторная отправка URL на индексацию не гарантирует включения страницы в индекс. Важно устранить причины, по которым она не была проиндексирована.

Реалистичные сроки: чего ждать

Восстановленная ссылка — это не кнопка «индексировать». Ниже ориентировочные сроки, на которые стоит опираться при планировании работ.

СобытиеОриентировочный срокНа что смотреть
Краулер замечает новую ссылку1–7 днейОбновление Inlinks и Crawl Depth в отчёте
Googlebot запрашивает страницу3–14 днейОбращения к URL в серверных логах
Страница попадает в индекс2–6 недельОтчёт «Страницы» в Search Console
Появляются показы по запросам4–10 недельЭффективность поиска в GSC и GA4
Стабильный органический трафик3–6 месяцевСравнение периодов в аналитике

Это ориентиры, а не гарантии. Если URL не показывает изменений спустя 6–8 недель, возвращайтесь к диагностике: проверьте canonical, дубли, HTTP-ответ и глубину обхода.

Какие метрики фиксировать до и после

МетрикаГде смотретьОжидаемый эффект
Доля страниц с 0 входящих ссылокОтчёт Screaming FrogСнижение к нулю среди целевых URL
Количество проиндексированных страницSearch Console → ИндексированиеРост после переобхода
Средняя глубина обходаОтчёт Screaming FrogУменьшение на 1–2 уровня
Показы и клики по восстановленным URLSearch Console → ЭффективностьРост показов через 4–8 недель
Доля переходов из поискаGA4Рост за счёт новых страниц
Число 404 и soft 404Логи и отчёт индексированияСнижение после чистки редиректов

10Как предотвратить появление новых страниц-сирот

Исправить существующие проблемы недостаточно. Если процессы публикации и изменения структуры не контролируются, через некоторое время ситуация повторится. Рекомендую внедрить несколько постоянных проверок:

  1. Перед удалением категории проверять все её дочерние URL и выгружать отчёт о входящих ссылках.
  2. После миграции сайта сравнивать старую и новую структуру внутренних ссылок, а не только редиректы.
  3. При публикации статьи добавлять ссылки из существующих тематических материалов.
  4. Перед удалением товара проверять его трафик, внешние ссылки и возможность равноценной замены.
  5. Регулярно сопоставлять XML Sitemap с результатами краулинга.
  6. Контролировать страницы, которые присутствуют в CMS, но отсутствуют в структуре сайта.
  7. Проверять глубину вложенности важных URL.
  8. Проводить повторный технический аудит после крупных изменений каталога.

Для крупных проектов имеет смысл автоматизировать сопоставление источников URL и формировать отдельный отчёт по страницам, которые перестали обнаруживаться через внутренние ссылки. Небольшой скрипт, запускаемый раз в неделю по расписанию, стоит дешевле, чем квартальный ручной аудит и найденные проблемы на годы позже.

11Чек-лист аудита Orphan Pages

Перед завершением проверки рекомендую пройтись по следующему списку.

  • Выполнен полный краулинг сайта.
  • Получен список URL из XML Sitemap.
  • Проверены страницы из Google Search Console.
  • Выгружены посадочные страницы из аналитики.
  • При необходимости изучены серверные логи.
  • Получен список опубликованных URL из CMS.
  • Списки URL объединены и очищены от дублей.
  • Проверены HTTP-коды и редиректы.
  • Проверены canonical и robots directives.
  • Подтверждено отсутствие входящих внутренних ссылок.
  • Исключены ложные срабатывания: JS-ссылки, PDF, параметры.
  • Найденные страницы разделены по типам.
  • Для каждого URL определено дальнейшее действие.
  • Восстановлена перелинковка ценных страниц.
  • Удалены или объединены ненужные URL.
  • Проведён повторный краулинг.
  • Настроен мониторинг состояния страниц.

12FAQ: частые вопросы о страницах-сиротах

Да. Google может обнаружить её через XML Sitemap, внешние ссылки, другие известные URL или иные источники. Отсутствие внутренних ссылок не является автоматическим запретом на индексирование.

XML Sitemap помогает поисковой системе обнаруживать URL, но не гарантирует их сканирование и индексирование. Причина может заключаться в качестве контента, дублировании, canonical, технических ограничениях или недостаточной ценности страницы.

Необходимо выполнить краулинг сайта, подключить дополнительные источники URL, например XML Sitemap и данные Search Console, а затем проверить отчёты Orphan Pages. URL, не обнаруженные обычным обходом, требуют дополнительной проверки.

Нет. Сначала необходимо определить назначение каждой страницы. Ценные материалы следует вернуть в структуру сайта, дубли объединить, устаревшие URL удалить или перенаправить, а специальные посадочные страницы обработать с учётом их назначения.

Универсального количества нет. Важнее релевантность источников, доступность страницы, логичность архитектуры и её значение для пользователей.

Отдельная страница без внутренних ссылок не обязательно создаёт проблему для всего сайта. Однако большое количество забытых, бесполезных и устаревших URL может указывать на проблемы архитектуры, приводить к неэффективному обходу и усложнять управление индексируемым контентом.

Для стабильного сайта — раз в месяц, для крупного интернет-магазина или портала с активной доработкой — раз в неделю. Поводом для внеплановой проверки служат редизайн, миграция, смена CMS, массовое удаление категорий и запуск новых разделов.

Заключение

Страницы-сироты — это не просто URL без внутренних ссылок. Это потенциально важные документы, которые выпали из архитектуры сайта и могут терять возможности для обнаружения, обхода и получения внутренних ссылочных сигналов.

При этом не каждый найденный URL нужно возвращать в индекс. Некоторые страницы необходимо объединить, другие удалить, а отдельные оставить доступными только для рекламных или пользовательских сценариев.

Поэтому грамотный аудит Orphan Pages должен начинаться не с массового добавления ссылок, а с сопоставления источников URL, проверки технического состояния и оценки самостоятельной ценности каждой страницы. Именно такой подход позволяет не просто устранить список ошибок в SEO-краулере, а восстановить логичную структуру сайта и сделать важные страницы доступными для пользователей и поисковых систем.

13Практикум: сколько страниц-сирот на конкретном сайте

Мы разобрали методы поиска, но у руководителя проекта вопрос всегда один: сколько именно страниц-сирот на моём сайте. Ниже — полный расчёт на вымышленном проекте, где каждая цифра выводится из предыдущей. Методика один в один переносится на ваш сайт, а в конце раздела есть калькулятор, который считает по вашим собственным цифрам.

Проект
«СанТехОпт» — сантехника и инженерные системы
Домен
santehopro.ru (вымышленный пример)
Опубликовано URL в CMS
24 700
Товаров / категорий / статей
8 940 / 1 260 / 2 310
Период анализа
90 дней логов и аналитики
  1. Шаг 1. Снимаем исходные данные

    Берём семь источников и для каждого считаем, сколько адресов краулер не нашёл. Эти числа — база для всего дальнейшего расчёта.

    ИсточникАдресов в источникеНе найдено краулеромЧто это показывает
    Краулинг (Screaming Frog)13 180—базовый список страниц
    XML Sitemap13 580400адрес есть в карте, но обход до него не дошёл
    Google Search Console11 905780Google знает страницы, которых нет в структуре
    Веб-аналитика (GA4)6 4311 210реальные посадочные без внутренних ссылок
    Серверные логи12 744940роботы запрашивали эти адреса
    CMS (опубликованные)15 5602 380забытые и «осиротевшие» разделы
    Внешние ссылки2 308410пришли извне, но не связаны внутри
    Σ новых адресов—6 120400 + 780 + 1 210 + 940 + 2 380 + 410
    Терминал с серверными логами: видны запрошенные краулерами адреса страниц каталога
    Логи — единственный источник, который показывает, какие адреса реально запрашивали роботы, даже если их нет ни в карте, ни в структуре ссылок.
  2. Шаг 2. Отсекаем технические адреса

    До расчёта нужно убрать мусор, иначе каждая цифра будет завышена. В CMS проекта опубликовано 24 700 URL, но 9 140 из них — служебные: фильтры, сортировки, пагинация, поиск, корзина, авторизация, личный кабинет, страницы сравнения и промо-страницы без контента.

    После отсева остаётся 15 560 содержательных URL — это и есть реальный фон, на котором считаем сирот. Отдельно вычищаем 1 120 технических адреса из XML Sitemap, чтобы поисковая система не получала противоречивых сигналов.

    24 700 URL в CMS − 9 140 служебных = 15 560 содержательных страниц
  3. Шаг 3. Объединяем источники и учитываем перекрытие

    Складывать новые адреса из семи источников напрямую нельзя: значительная часть встречается сразу в нескольких. В среднем адрес из «новых» попадает в два-три источника — например, в sitemap, в логи и в аналитику. По замерам на этом проекте перекрытие составило 55 %.

    Σ новых адресов = 400 + 780 + 1 210 + 940 + 2 380 + 410 = 6 120 Перекрытие источников ≈ 55 % Кандидаты в сироты = 6 120 × (1 − 0,55) ≈ 2 754 URL

    Коэффициент перекрытия — единственная неточная величина в формуле. Если источники независимы (например, логи и внешние ссылки), перекрытие ниже и кандидатов больше; если все списки выгружены из одной CMS — выше. Практически: посмотрите, сколько адресов совпадает в двух самых близких источниках, и используйте эту долю.

  4. Шаг 4. Разбираем кандидатов по типам

    2 754 — это потолок. Дальше каждый адрес проверяется вручную: открывается, сверяются HTTP-ответ, canonical, реальные входящие ссылки и ценность контента.

    Тип кандидатаКандидатовЧто с ними делать
    Товары в наличии без ссылок1 210726 с трафиком — вернуть в категории, 484 без трафика — объединить или 410
    Статьи блога без перелинковки601233 с трафиком — связать с тематикой, 368 — объединить с актуальными
    Категории после реструктуризации344восстановить хлебные крошки и 301-цепочки
    Служебные URL (фильтры, «в наличии»)266закрыть от индексации, убрать из карты
    Дубли карточек184301 на основной URL
    Товары сняты с продажи149410 или 301 на равноценный аналог
    Итого кандидатов2 754из них реальных сирот — около 60 %

    Итоговое решение по каждому типу распределяется так:

    • Вернуть в структуру — 1 303 URL (726 товаров + 233 статьи + 344 категории);
    • Объединить и перенаправить — 1 036 URL (484 товара + 368 статей + 184 дубля);
    • Закрыть или удалить — 415 URL (266 служебных + 149 снятых товаров).

    Сумма сходится с числом кандидатов: 1 303 + 1 036 + 415 = 2 754.

  5. Шаг 5. Считаем эффект и сроки

    После внедрения правок показатели меняются не мгновенно, поэтому фиксируем контрольные значения до начала работ и сравниваем их через 3–4 месяца.

    ПоказательДоПосле
    Кандидатов-сирот2 7540
    Страниц в индексе Google9 64010 520
    Доля страниц без входящих ссылок17,7 %0,4 %
    Средняя глубина обхода4,63,9
    Запросов в индексе41 20046 800
    Кликов из поиска (оценка)38 40043 000 (+12 %)

    Отдельно считаем трудозатраты — по ним обычно и спорит команда:

    ЭтапВремя
    Выгрузка и нормализация семи источников3–4 часа
    Первичная сортировка кандидатов1–2 часа
    Ручная проверка 2 754 URL (по 40–60 URL в час)50–70 часов
    Согласование решений с контент-командой4–6 часов
    Внесение правок в CMS3–5 дней
    Повторный краулинг и итоговый отчёт2–3 часа
    Итого3–4 недели

Калькулятор: посчитайте свой сайт

Введите числа из своих отчётов — расчёт обновится сразу. Значение «не найдено краулером» берётся из простого сравнения: адрес есть в источнике, но отсутствует в отчёте обхода.

Исходные данные

Подставьте значения из своих выгрузок. Если расчёт отличается от ожидаемого — начните с аналитики и логов: там самые «живые» адреса.

Кандидатов в страницы-сироты

2 754

Σ новых адресов
6 120
Из них с трафиком
959
Реальных сирот (≈60 %)
≈ 1 652
Вернуть в структуру
≈ 1 303
Рабочих дней на проверку
≈ 34 дня

Кандидат — ещё не сирота. Обычно 30–40 % адресов отсеивается как ложные срабатывания или технические страницы.

Важная оговорка

Проект «СанТехОпт» и все цифры в примере — модельные: домен вымышленный, показатели соответствуют типичному интернет-магазину на 24 700 URL. Методика расчёта при этом рабочая: она переносится на любой сайт без изменений, меняются только исходные цифры и коэффициент перекрытия.

Нужен технический SEO-аудит сайта?

Проверю внутреннюю архитектуру, индексацию, техническое состояние URL, перелинковку и другие факторы, которые могут ограничивать поисковую видимость.

  • Полный краулинг и разбор страниц-сирот
  • Диагностика индексации, canonical и директив
  • Аудит перелинковки и глубины структуры
  • План работ с приоритетами и сроками

Стоимость SEO-продвижения — от 15 000 ₽ в месяц

Написать в Telegram SEOProf74 — продвижение сайтов в Яндексе и Google

Работаю с технической оптимизацией, внутренней перелинковкой и GEO.

Made on
Tilda