Техническое SEO · разбор
Страница открывается, отдаёт 200 и лежит в XML Sitemap — но на неё не ведёт ни одна внутренняя ссылка. Разбираем, откуда берутся такие URL, почему Google их не индексирует и что с ними делать: диагностика, готовые скрипты, матрица решений и сроки проверки.
Страница опубликована, открывается в браузере, возвращает HTTP 200 и даже присутствует в XML Sitemap. Но есть проблема: на неё не ведёт ни одна внутренняя ссылка с других страниц сайта.
Такие URL называются страницами-сиротами (Orphan Pages). Они существуют отдельно от основной структуры сайта и не имеют нормального пути обнаружения через внутреннюю перелинковку.
Для поисковых систем это может стать серьёзной проблемой. Google способен обнаружить страницу через sitemap, внешнюю ссылку или другие источники, но отсутствие внутренних ссылок затрудняет её обнаружение, повторное сканирование и оценку значимости в структуре сайта.
Особенно часто проблема встречается на крупных интернет-магазинах, информационных порталах и сайтах, которые неоднократно меняли структуру, переносили разделы или удаляли категории.
Страница-сирота — это URL, который не имеет входящих внутренних ссылок с других страниц сайта.
Представим обычную структуру интернет-магазина:
Пользователь может последовательно переходить между разделами и в конечном итоге попадать на нужную страницу товара. Но иногда происходит другая ситуация: карточка товара опубликована, доступна по прямому URL, присутствует в CMS и даже добавлена в XML Sitemap, однако ни одна категория, подборка или другая страница сайта на неё не ссылается.
Получается, что страница существует, но выпала из внутренней архитектуры.
| Параметр | Пример значения |
|---|---|
| URL | /catalog/product-458/ |
| HTTP-ответ | 200 OK |
| В XML Sitemap | Да |
| Внутренние входящие ссылки | 0 |
| Canonical | На саму страницу |
| Индексация Google | Нет |
| Внешние ссылки | Нет |
Такой URL можно считать кандидатом в страницы-сироты.
Важный нюанс
Отсутствие ссылок не означает, что поисковая система вообще не знает о существовании страницы. Если адрес есть в sitemap или на него ссылается другой сайт, Google может обнаружить его независимо от внутренней перелинковки.
Поэтому при техническом аудите необходимо различать две ситуации:
Обычно такие URL возникают не из-за одной серьёзной технической ошибки, а вследствие постепенного изменения структуры сайта.
После редизайна или переработки каталога разработчики могут удалить старые категории, изменить меню или переместить страницы. При этом сами URL продолжают открываться. Например, раньше товар находился в категории /catalog/tools/drills/product-458/, а после изменения структуры каталог стал выглядеть так: /catalog/power-tools/drills/. Старая карточка осталась опубликованной, но ссылки на неё из прежнего раздела больше нет.
Если категория удаляется без предварительной проверки входящих ссылок, её дочерние страницы могут потерять единственный путь обнаружения. Особенно опасна ситуация, когда одновременно удаляются:
При этом URL товаров продолжают возвращать HTTP 200.
При переносе сайта на новую CMS или изменении URL-структуры часть страниц может не попасть в новую архитектуру. Старые URL иногда продолжают работать, но соответствующие им новые страницы не получают внутренних ссылок. Поэтому после миграции необходимо проверять не только редиректы, canonical и sitemap, но и сохранение ссылочной структуры.
Подробнее о рисках переноса можно прочитать в материале «SEO-миграция сайта без потери трафика».
В интернет-магазинах нередко встречается следующая ситуация: товар закончился, карточку убрали из категории, но саму страницу оставили доступной. Если товар больше не продаётся, но URL продолжает отвечать HTTP 200, необходимо определить, имеет ли страница самостоятельную ценность. Например, карточка может содержать полезные характеристики, отзывы, инструкции и получать органический трафик. В таком случае её необязательно удалять.
Контент-менеджер создал новую статью, опубликовал её, но забыл добавить ссылку из тематического раздела или других материалов. В результате статья существует, но не включена в контентную архитектуру сайта.
Некоторые страницы специально создаются отдельно от основного каталога: посадочные страницы для контекстной рекламы, акций или отдельных рекламных кампаний. Отсутствие внутренних ссылок в таком случае может быть осознанным решением. Такие URL не нужно автоматически добавлять в основную структуру сайта — сначала следует определить, должны ли они вообще участвовать в органическом поиске.
Отсутствие внутренних ссылок — не самостоятельная директива для исключения URL из индекса. Google может обнаружить страницу другими способами. Однако внутренняя перелинковка выполняет сразу несколько важных функций:
Если страница-сирота не присутствует в sitemap, не имеет внешних ссылок и не обнаруживается через другие источники, поисковый робот может вообще не узнать о её существовании. Если же URL известен Google, но не имеет внутренних ссылок, это ещё не гарантирует его индексацию.
Дополнительные причины могут включать:
Страница содержит мало полезной информации, повторяет другие документы или не отвечает на самостоятельный пользовательский запрос.
Несколько URL содержат практически одинаковые материалы, а Google выбирает другой адрес в качестве canonical.
На странице указан canonical, ведущий на другой URL.
Страница закрыта через noindex, требует авторизации, имеет ошибки ответа сервера или неправильно настроенный robots.txt.
Даже если формально несколько ссылок существуют, страница может находиться слишком глубоко в структуре и получать мало внутренних ссылочных сигналов.
Поисковая система может не считать необходимым индексировать определённую страницу, несмотря на возможность её сканирования.
Не смешивайте три этапа
Обнаружение URL, сканирование страницы и включение документа в индекс — это разные процессы. Успешное прохождение одного этапа не гарантирует прохождения следующего. Страница может быть обнаружена, но не просканирована — и наоборот.
Одна из наиболее распространённых ошибок при поиске orphan pages — запуск краулера и попытка найти все проблемные URL только по результатам одного обхода.
Обычный краулер начинает работу с главной страницы и переходит по обнаруженным внутренним ссылкам. Если URL не связан с этой структурой, он просто не попадёт в список найденных страниц. Поэтому для полноценной диагностики необходимо сопоставлять результаты краулинга с дополнительными источниками адресов.
Для начала необходимо получить список URL, доступных через текущую внутреннюю ссылочную структуру. Для этого можно использовать Screaming Frog SEO Spider.
Рекомендуемые параметры проверки:
После завершения обхода необходимо выгрузить список внутренних HTML-страниц. Для каждой страницы желательно сохранить:
| Параметр | Для чего нужен |
|---|---|
| URL | Адрес страницы |
| Status Code | Проверка HTTP-ответа |
| Indexability | Возможность индексирования |
| Canonical URL | Проверка канонического адреса |
| Inlinks | Количество входящих внутренних ссылок |
| Crawl Depth | Глубина страницы |
| Content Type | Тип документа |
| Title | Идентификация страницы |
Особое внимание стоит уделить страницам с нулевым количеством входящих ссылок и пустой глубиной обхода.
Ноль в отчёте ≠ ноль на сайте
Нулевое число ссылок в конкретном отчёте не всегда означает абсолютное отсутствие ссылок на сайте. Необходимо учитывать настройки краулера и типы ссылок, которые он обрабатывает.
Следующий источник — XML-карта сайта. Необходимо получить полный список URL, которые сайт сообщает поисковым системам как важные или доступные для обнаружения. Сопоставляем два списка: URL, обнаруженные краулером, и URL, присутствующие в XML Sitemap.
Если адрес есть в sitemap, но отсутствует в результатах обычного обхода, он становится кандидатом на дополнительную проверку.
| URL | В Sitemap | Найден краулером |
|---|---|---|
| /blog/seo-audit/ | Да | Да |
| /catalog/product-458/ | Да | Нет |
| /catalog/product-512/ | Да | Да |
| /blog/old-guide/ | Да | Нет |
В данном примере два адреса требуют проверки. Но пока нельзя утверждать, что оба являются полноценными страницами-сиротами. Возможно, один URL является редиректом, другой закрыт от обхода или относится к отдельной языковой версии.
Search Console позволяет получить информацию об URL, которые уже известны Google. Для диагностики пригодятся:
Особенно интересны URL, которые:
Сама по себе Search Console не предоставляет универсального отчёта со всеми страницами-сиротами. Её данные необходимо сопоставлять с результатами краулинга. Для дополнительной проверки можно использовать URL Inspection и смотреть известный Google статус URL, выбранную canonical и сведения о последнем сканировании.
Ещё один источник — посадочные страницы, на которые пользователи реально приходят. Например, в Google Analytics 4 можно получить список страниц входа за выбранный период. Если URL получает посещения, но не обнаруживается краулером, его стоит проверить отдельно.
Возможные объяснения:
Необходимо учитывать, что GA4 показывает только посещения, зарегистрированные аналитикой. Отсутствие URL в отчёте не означает, что на страницу никто не переходит.
Анализ логов позволяет увидеть, какие URL действительно запрашивали поисковые роботы. Для каждой записи желательно получить:
Особенно интересны URL, которые Googlebot регулярно запрашивает, но которые отсутствуют в обычном краулинге. Это может указывать на то, что поисковая система знает об адресе из другого источника.
User-Agent не равен Googlebot
Строка User-Agent сама по себе не доказывает, что запрос действительно выполнил Googlebot. Для подтверждения необходимо проверять подлинность поискового робота по IP и официальным рекомендациям Google.
Подробнее о работе с логами можно прочитать в статье Log File Analysis: анализ серверных логов для SEO.
Для крупных сайтов полезно выгрузить список всех опубликованных материалов непосредственно из CMS или базы данных. Это позволяет обнаружить страницы, которые:
В идеале следует получить: URL, ID записи, тип страницы, статус публикации, дату создания, дату последнего изменения, родительскую категорию и наличие canonical.
Так можно обнаружить не только страницы-сироты, но и другие нарушения архитектуры сайта.
Из чего складывается полная картина
Один источник показывает лишь часть картины. Кандидат — это URL, который есть хотя бы в одном дополнительном источнике, но не найден обычным краулингом. Дальше его нужно проверить вручную: HTTP-код, canonical, реальные входящие ссылки и ценность страницы.
Ложные срабатывания — самая частая ошибка на первом проходе. Если краулер настроен неверно, «сиротами» окажутся совершенно нормальные страницы:
| Симптом | Вероятная причина | Как проверить |
|---|---|---|
| 0 входящих ссылок, но страница в меню | Ссылка рендерится JavaScript-ом, краулер без JS-рендеринга её не увидел | Повторный обход с JavaScript Rendering |
| Страница есть в интерфейсе, но не в отчёте | Ссылка обёрнута в <noscript> или в клиентский обработчик без href | Просмотр исходного кода и рендер в браузере |
| URL в sitemap, но не в обходе | Страница закрыта паролем, фильтром или правилом robots.txt | Проверка HTTP-ответа и robots.txt |
| Страница найдена только как PDF или DOC | Документ не является HTML-страницей | Проверка Content Type в отчёте |
| Ссылка есть, но в картинке | Ссылка в атрибуте usemap или в <area> | Поиск по HTML карты изображения |
| Много похожих URL с параметрами | Фильтры, сортировки, пагинация | Сравнение параметров и canonical |
| Страница есть в логах, но не в краулинге | Запрос пришёл от подделанного User-Agent или из внешнего источника | Проверка IP по спискам Google |
Практическое правило: прежде чем записывать адрес в отчёт как сироту, откройте его и посмотрите исходный HTML. Девять из десяти «неожиданных» случаев объясняются настройками краулера, а не архитектурой сайта.
После выгрузки отчёта в CSV отфильтруйте строки по трём условиям одновременно:
Status Code = 200
Indexability = Indexable
Inlinks = 0Именно пересечение трёх фильтров отсекает редиректы, служебные страницы и запрещённые к индексации документы. Остаток — рабочий список кандидатов, с которым уже можно работать.
Наиболее надёжный подход — объединить результаты нескольких источников в одну таблицу. Обозначим: C — URL, найденные обычным краулингом; S — URL из XML Sitemap; G — URL из Google Search Console; A — URL из веб-аналитики; L — URL из серверных логов; M — URL из CMS; B — URL, обнаруженные через внешние ссылки.
Orphan candidates = (S ∪ G ∪ A ∪ L ∪ M ∪ B) − CЭто не готовый список подтверждённых страниц-сирот. Это список URL, которые требуют проверки. Перед окончательной классификацией необходимо:
Для автоматизации можно использовать Google Sheets, Excel, Python или специализированные SEO-инструменты. Ниже — две готовые заготовки, которые экономят часы ручной работы.
Создайте по вкладке на каждый источник: «Краулинг», «Sitemap», «GSC», «GA4», «Логи», «CMS». В колонке A каждой вкладки — URL, в колонке B основной лист — сводный результат.
=SUBSTITUTE(SUBSTITUTE(SUBSTITUTE(LOWER(A2),
"https://seoprof74.ru",""),
"http://",""),
"//","/")=ЕСЛИ(СЧЁТЕСЛИ(Краулинг!$A:$A;$A2)>0;"";
ЕСЛИ(ИЛИ(
СЧЁТЕСЛИ(Sitemap!$A:$A;$A2)>0;
СЧЁТЕСЛИ(GSC!$A:$A;$A2)>0;
СЧЁТЕСЛИ(GA4!$A:$A;$A2)>0;
СЧЁТЕСЛИ(Логи!$A:$A;$A2)>0;
СЧЁТЕСЛИ(CMS!$A:$A;$A2)>0);
"Кандидат";"")))Формула нормализации убирает протокол, домен и дублирующие слеши, поэтому /catalog/a// и /catalog/a/ попадут в одну и ту же ячейку. Формула-флаг возвращает «Кандидат» только тем URL, которых нет в отчёте краулинга, но которые подтверждены хотя бы одним другим источником.
Если данные уже выгружены в CSV, пересечение считается в несколько строк кода:
# urls.csv: колонка url + колонка source import csv
from collections import defaultdict
sources = defaultdict(set)
with open('urls.csv', encoding='utf-8') as f:
for row in csv.DictReader(f):
url = row['url'].strip().lower().rstrip('/')
sources[row['source']].add(url)
crawl = sources.get('crawl', set())
extra = set().union(*[v for k, v in sources.items() if k != 'crawl'])
for url in sorted(extra - crawl):
print(url)Скрипт печатает только те адреса, которые подтверждены дополнительными источниками, но не найдены краулингом. На выходе — готовый список кандидатов, который можно импортировать в таблицу решения.
В простой таблице удобно сделать следующие столбцы:
| URL | Crawl | Sitemap | GSC | GA4 | Logs | HTTP | Inlinks | Решение |
|---|---|---|---|---|---|---|---|---|
| /blog/article-1/ | Нет | Да | Да | Да | Да | 200 | 0 | Восстановить ссылки |
| /product/458/ | Нет | Да | Нет | Нет | Нет | 200 | 0 | Проверить ценность |
| /old-campaign/ | Нет | Нет | Нет | Да | Да | 200 | 0 | Удалить или закрыть |
| /catalog/category-5/ | Да | Да | Да | Да | Да | 200 | 3 | Не сирота |
Рассмотрим условный интернет-магазин строительных материалов. В каталоге размещено около 12 000 URL, включая категории, подкатегории, карточки товаров и информационные страницы. После обычного краулинга получены следующие результаты:
| Показатель | Значение |
|---|---|
| URL, найденные краулером | 10 850 |
| URL в XML Sitemap | 11 700 |
| URL из Google Search Console | 9 430 |
| URL с посещениями по GA4 | 4 820 |
| URL из CMS | 12 140 |
После объединения и нормализации списков обнаружено 1 290 адресов, которые присутствуют хотя бы в одном дополнительном источнике, но не найдены обычным краулингом.
Из чего состояли 1 290 кандидатов
Из 1 290 адресов только 640 оказались действующими страницами, для которых необходимо было принять отдельное решение. Дальнейшая проверка показала:
После классификации был составлен план работ. Для 260 ценных страниц восстановили ссылки из соответствующих категорий и тематических материалов. Для 120 дублей объединили полезную информацию с основными страницами и настроили релевантные 301-редиректы. Для 145 устаревших URL приняли решение об удалении или перенаправлении в зависимости от наличия равноценной замены. Оставшиеся 115 адресов передали на дополнительную проверку canonical, HTTP-ответов, индексации и истории публикаций.
Важно
Все показатели в примере условные. Это демонстрационная модель аудита, а не реальный клиентский кейс.
Главный вывод: обнаружить тысячу URL без внутренних ссылок — ещё не значит получить тысячу SEO-проблем. Сначала необходимо определить, какие из них действительно должны участвовать в поиске.
После диагностики не стоит автоматически добавлять ссылки на все обнаруженные URL. У каждой страницы должна быть своя стратегия.
Это наиболее простой случай. Если страница содержит самостоятельную ценность, отвечает на поисковый запрос и должна получать органический трафик, её необходимо вернуть в структуру сайта. Что сделать:
Например, есть статья «Как выбрать строительную шпаклёвку», но на неё не ведёт ни одна ссылка из других материалов. Можно добавить контекстную ссылку из статьи о подготовке стен к отделке, а также включить её в тематический раздел блога. Главное — ссылка должна быть полезна пользователю, а не существовать только ради поискового робота.
Если обнаружено несколько URL с одинаковым или очень похожим содержанием, необходимо определить основную страницу. Возможные действия: объединить полезную информацию, выбрать основной URL, настроить 301-редирект со старого адреса, проверить canonical, обновить внутренние ссылки, удалить старые URL из sitemap.
/blog/seo-audit-2023/
/blog/seo-audit/Обе страницы рассказывают об одном и том же, но вторая содержит более актуальную информацию. Если самостоятельной ценности у старой страницы нет, материалы можно объединить, а старый URL перенаправить на актуальный.
Куда нельзя перенаправлять
301-редирект должен вести на действительно релевантную замену, а не на главную страницу сайта.
Если URL не имеет полезного контента, внешних ссылок, трафика и не представляет ценность для пользователей, его можно удалить. В зависимости от ситуации используют:
Не следует перенаправлять все старые URL на главную или случайную категорию. Это может привести к появлению soft 404 и другим проблемам.
Например, это может быть отдельная посадочная страница рекламной кампании. Если она нужна пользователям, но не должна участвовать в органическом поиске, можно использовать meta robots noindex.
<meta name="robots" content="noindex, follow">При этом необходимо убедиться, что поисковый робот может загрузить страницу и увидеть директиву noindex. Если URL заблокирован в robots.txt, поисковая система может не прочитать эту директиву.
noindex и sitemap несовместимы
Страницу с noindex нужно убрать из XML Sitemap — иначе вы отправляете Google противоречивые сигналы: «обнаружение — да, индексация — нет». Проверьте, нет ли таких URL в вашей карте.
Не каждая проблема внутренней архитектуры связана с полным отсутствием ссылок. Иногда URL имеет одну входящую ссылку, но находится на пятом или шестом уровне вложенности: Главная → Каталог → Категория → Подкатегория → Подраздел → Товар. В таком случае можно:
Задача — сделать важные URL доступными через понятные и логичные маршруты.
Когда кандидатов сотни, решения удобно принимать по единой логике. Ниже — матрица, которой можно пользоваться прямо в таблице аудита.
| Тип адреса | Есть трафик или ссылки | Действие | Риск |
|---|---|---|---|
| Товар или услуга | Да | Вернуть в структуру | Низкий |
| Товар или услуга | Нет | Проверить ценность и спрос | Средний |
| Статья или гайд | Да | Связать с тематикой | Низкий |
| Дубль или вариант | Любой | Объединить + 301 | Низкий |
| Товар снят с продажи | Нет | 410 или 301 на аналог | Низкий |
| Лендинг рекламной кампании | Нет | Закрыть noindex, убрать из sitemap | Низкий |
| Технический адрес, фильтры | Нет | Закрыть от обхода | Нужен контроль краулера |
| Редирект или удалённый URL | Нет | Убрать из sitemap и отчётов | Низкий |
При восстановлении ссылок важно учитывать не только количество входящих ссылок, но и их качество. Например, одна контекстная ссылка из тематической статьи может быть полезнее нескольких ссылок из случайных блоков. Рекомендую использовать несколько уровней перелинковки.
Карточки товаров должны быть доступны из соответствующих категорий и подкатегорий.
Информационные материалы могут ссылаться на другие статьи, инструкции, услуги и подходящие товарные разделы.
Они помогают пользователям ориентироваться в структуре сайта и создают дополнительные внутренние связи.
Подходят для товаров, статей и сопутствующих материалов, если рекомендации действительно релевантны.
Важные страницы должны иметь понятное место в общей архитектуре сайта.
При добавлении ссылок следует использовать обычные HTML-ссылки с атрибутом href:
<a href="/blog/seo-audit/">Как провести SEO-аудит сайта</a>Google рекомендует использовать доступные для обхода HTML-ссылки с href. Ссылки, реализованные исключительно через обработчики JavaScript или нестандартные элементы, могут обрабатываться ненадёжно.
Практический приём
Чтобы не «забыть» про восстановленные ссылки, добавьте их восстановление в чек-лист публикации: вместе с новым материалом всегда указывается минимум одна ссылка из существующей страницы. Одна минута контент-менеджера экономит недели технической доработки.
После восстановления перелинковки необходимо провести повторную диагностику. Я бы разделил контроль на несколько этапов.
Повторно запускаем краулер и проверяем:
Проверяем HTTP 200 для страниц, которые должны работать, отсутствие нежелательного noindex, корректность canonical, доступность для Googlebot и актуальность XML Sitemap.
Используем URL Inspection для приоритетных страниц. Смотрим: известен ли URL Google, когда выполнялось последнее сканирование, какой canonical выбран Google, доступна ли страница для индексирования, присутствует ли она в индексе.
Проверяем, появились ли новые обращения Googlebot к восстановленным URL. Необходимо учитывать, что поисковые роботы не обязаны посещать страницы сразу после изменения перелинковки.
Через несколько недель анализируем динамику количества индексируемых страниц, показы и клики в Search Console, изменение органического трафика, динамику запросов и появление новых URL в отчётах индексирования.
Повторная отправка URL не решает проблему
Повторная отправка URL на индексацию не гарантирует включения страницы в индекс. Важно устранить причины, по которым она не была проиндексирована.
Восстановленная ссылка — это не кнопка «индексировать». Ниже ориентировочные сроки, на которые стоит опираться при планировании работ.
| Событие | Ориентировочный срок | На что смотреть |
|---|---|---|
| Краулер замечает новую ссылку | 1–7 дней | Обновление Inlinks и Crawl Depth в отчёте |
| Googlebot запрашивает страницу | 3–14 дней | Обращения к URL в серверных логах |
| Страница попадает в индекс | 2–6 недель | Отчёт «Страницы» в Search Console |
| Появляются показы по запросам | 4–10 недель | Эффективность поиска в GSC и GA4 |
| Стабильный органический трафик | 3–6 месяцев | Сравнение периодов в аналитике |
Это ориентиры, а не гарантии. Если URL не показывает изменений спустя 6–8 недель, возвращайтесь к диагностике: проверьте canonical, дубли, HTTP-ответ и глубину обхода.
| Метрика | Где смотреть | Ожидаемый эффект |
|---|---|---|
| Доля страниц с 0 входящих ссылок | Отчёт Screaming Frog | Снижение к нулю среди целевых URL |
| Количество проиндексированных страниц | Search Console → Индексирование | Рост после переобхода |
| Средняя глубина обхода | Отчёт Screaming Frog | Уменьшение на 1–2 уровня |
| Показы и клики по восстановленным URL | Search Console → Эффективность | Рост показов через 4–8 недель |
| Доля переходов из поиска | GA4 | Рост за счёт новых страниц |
| Число 404 и soft 404 | Логи и отчёт индексирования | Снижение после чистки редиректов |
Исправить существующие проблемы недостаточно. Если процессы публикации и изменения структуры не контролируются, через некоторое время ситуация повторится. Рекомендую внедрить несколько постоянных проверок:
Для крупных проектов имеет смысл автоматизировать сопоставление источников URL и формировать отдельный отчёт по страницам, которые перестали обнаруживаться через внутренние ссылки. Небольшой скрипт, запускаемый раз в неделю по расписанию, стоит дешевле, чем квартальный ручной аудит и найденные проблемы на годы позже.
Перед завершением проверки рекомендую пройтись по следующему списку.
Да. Google может обнаружить её через XML Sitemap, внешние ссылки, другие известные URL или иные источники. Отсутствие внутренних ссылок не является автоматическим запретом на индексирование.
XML Sitemap помогает поисковой системе обнаруживать URL, но не гарантирует их сканирование и индексирование. Причина может заключаться в качестве контента, дублировании, canonical, технических ограничениях или недостаточной ценности страницы.
Необходимо выполнить краулинг сайта, подключить дополнительные источники URL, например XML Sitemap и данные Search Console, а затем проверить отчёты Orphan Pages. URL, не обнаруженные обычным обходом, требуют дополнительной проверки.
Нет. Сначала необходимо определить назначение каждой страницы. Ценные материалы следует вернуть в структуру сайта, дубли объединить, устаревшие URL удалить или перенаправить, а специальные посадочные страницы обработать с учётом их назначения.
Универсального количества нет. Важнее релевантность источников, доступность страницы, логичность архитектуры и её значение для пользователей.
Отдельная страница без внутренних ссылок не обязательно создаёт проблему для всего сайта. Однако большое количество забытых, бесполезных и устаревших URL может указывать на проблемы архитектуры, приводить к неэффективному обходу и усложнять управление индексируемым контентом.
Для стабильного сайта — раз в месяц, для крупного интернет-магазина или портала с активной доработкой — раз в неделю. Поводом для внеплановой проверки служат редизайн, миграция, смена CMS, массовое удаление категорий и запуск новых разделов.
Страницы-сироты — это не просто URL без внутренних ссылок. Это потенциально важные документы, которые выпали из архитектуры сайта и могут терять возможности для обнаружения, обхода и получения внутренних ссылочных сигналов.
При этом не каждый найденный URL нужно возвращать в индекс. Некоторые страницы необходимо объединить, другие удалить, а отдельные оставить доступными только для рекламных или пользовательских сценариев.
Поэтому грамотный аудит Orphan Pages должен начинаться не с массового добавления ссылок, а с сопоставления источников URL, проверки технического состояния и оценки самостоятельной ценности каждой страницы. Именно такой подход позволяет не просто устранить список ошибок в SEO-краулере, а восстановить логичную структуру сайта и сделать важные страницы доступными для пользователей и поисковых систем.
Мы разобрали методы поиска, но у руководителя проекта вопрос всегда один: сколько именно страниц-сирот на моём сайте. Ниже — полный расчёт на вымышленном проекте, где каждая цифра выводится из предыдущей. Методика один в один переносится на ваш сайт, а в конце раздела есть калькулятор, который считает по вашим собственным цифрам.
Берём семь источников и для каждого считаем, сколько адресов краулер не нашёл. Эти числа — база для всего дальнейшего расчёта.
| Источник | Адресов в источнике | Не найдено краулером | Что это показывает |
|---|---|---|---|
| Краулинг (Screaming Frog) | 13 180 | — | базовый список страниц |
| XML Sitemap | 13 580 | 400 | адрес есть в карте, но обход до него не дошёл |
| Google Search Console | 11 905 | 780 | Google знает страницы, которых нет в структуре |
| Веб-аналитика (GA4) | 6 431 | 1 210 | реальные посадочные без внутренних ссылок |
| Серверные логи | 12 744 | 940 | роботы запрашивали эти адреса |
| CMS (опубликованные) | 15 560 | 2 380 | забытые и «осиротевшие» разделы |
| Внешние ссылки | 2 308 | 410 | пришли извне, но не связаны внутри |
| Σ новых адресов | — | 6 120 | 400 + 780 + 1 210 + 940 + 2 380 + 410 |
До расчёта нужно убрать мусор, иначе каждая цифра будет завышена. В CMS проекта опубликовано 24 700 URL, но 9 140 из них — служебные: фильтры, сортировки, пагинация, поиск, корзина, авторизация, личный кабинет, страницы сравнения и промо-страницы без контента.
После отсева остаётся 15 560 содержательных URL — это и есть реальный фон, на котором считаем сирот. Отдельно вычищаем 1 120 технических адреса из XML Sitemap, чтобы поисковая система не получала противоречивых сигналов.
Складывать новые адреса из семи источников напрямую нельзя: значительная часть встречается сразу в нескольких. В среднем адрес из «новых» попадает в два-три источника — например, в sitemap, в логи и в аналитику. По замерам на этом проекте перекрытие составило 55 %.
Коэффициент перекрытия — единственная неточная величина в формуле. Если источники независимы (например, логи и внешние ссылки), перекрытие ниже и кандидатов больше; если все списки выгружены из одной CMS — выше. Практически: посмотрите, сколько адресов совпадает в двух самых близких источниках, и используйте эту долю.
2 754 — это потолок. Дальше каждый адрес проверяется вручную: открывается, сверяются HTTP-ответ, canonical, реальные входящие ссылки и ценность контента.
| Тип кандидата | Кандидатов | Что с ними делать |
|---|---|---|
| Товары в наличии без ссылок | 1 210 | 726 с трафиком — вернуть в категории, 484 без трафика — объединить или 410 |
| Статьи блога без перелинковки | 601 | 233 с трафиком — связать с тематикой, 368 — объединить с актуальными |
| Категории после реструктуризации | 344 | восстановить хлебные крошки и 301-цепочки |
| Служебные URL (фильтры, «в наличии») | 266 | закрыть от индексации, убрать из карты |
| Дубли карточек | 184 | 301 на основной URL |
| Товары сняты с продажи | 149 | 410 или 301 на равноценный аналог |
| Итого кандидатов | 2 754 | из них реальных сирот — около 60 % |
Итоговое решение по каждому типу распределяется так:
Сумма сходится с числом кандидатов: 1 303 + 1 036 + 415 = 2 754.
После внедрения правок показатели меняются не мгновенно, поэтому фиксируем контрольные значения до начала работ и сравниваем их через 3–4 месяца.
| Показатель | До | После |
|---|---|---|
| Кандидатов-сирот | 2 754 | 0 |
| Страниц в индексе Google | 9 640 | 10 520 |
| Доля страниц без входящих ссылок | 17,7 % | 0,4 % |
| Средняя глубина обхода | 4,6 | 3,9 |
| Запросов в индексе | 41 200 | 46 800 |
| Кликов из поиска (оценка) | 38 400 | 43 000 (+12 %) |
Отдельно считаем трудозатраты — по ним обычно и спорит команда:
| Этап | Время |
|---|---|
| Выгрузка и нормализация семи источников | 3–4 часа |
| Первичная сортировка кандидатов | 1–2 часа |
| Ручная проверка 2 754 URL (по 40–60 URL в час) | 50–70 часов |
| Согласование решений с контент-командой | 4–6 часов |
| Внесение правок в CMS | 3–5 дней |
| Повторный краулинг и итоговый отчёт | 2–3 часа |
| Итого | 3–4 недели |
Введите числа из своих отчётов — расчёт обновится сразу. Значение «не найдено краулером» берётся из простого сравнения: адрес есть в источнике, но отсутствует в отчёте обхода.
Подставьте значения из своих выгрузок. Если расчёт отличается от ожидаемого — начните с аналитики и логов: там самые «живые» адреса.
Кандидатов в страницы-сироты
2 754
Кандидат — ещё не сирота. Обычно 30–40 % адресов отсеивается как ложные срабатывания или технические страницы.
Важная оговорка
Проект «СанТехОпт» и все цифры в примере — модельные: домен вымышленный, показатели соответствуют типичному интернет-магазину на 24 700 URL. Методика расчёта при этом рабочая: она переносится на любой сайт без изменений, меняются только исходные цифры и коэффициент перекрытия.
Проверю внутреннюю архитектуру, индексацию, техническое состояние URL, перелинковку и другие факторы, которые могут ограничивать поисковую видимость.
Стоимость SEO-продвижения — от 15 000 ₽ в месяц
Написать в Telegram SEOProf74 — продвижение сайтов в Яндексе и GoogleРаботаю с технической оптимизацией, внутренней перелинковкой и GEO.