Собрать независимые списки
Сделайте обход от главной только по ссылкам сайта. Не подмешивайте карту сайта на первом шаге, иначе адрес из sitemap будет найден даже без входящей ссылки. Сохраните для каждого документа первый путь и длину кратчайшего маршрута. Затем отдельно соберите адреса из карты сайта, отчётов поиска и аналитики по входам. Приведите их к согласованному виду с учётом хоста и слеша, сохраняя исходные URL для проверки.
Адрес из отчёта с кликами, которого нет в обходе, — кандидат на проверку. Причиной может быть отсутствие ссылки, ограничение сканера или ошибка ответа. Откройте его вручную и посмотрите, обнаруживает ли инструмент ссылки, которые появляются в интерфейсе. Если ссылка формируется только после сложного действия, зафиксируйте, что именно должен сделать пользователь.
Расставить приоритеты по назначению страниц
Учебный пример: у каталога 400 URL. Из карты сайта 25 не нашлись в обходе, а ещё 60 открываются только через четыре и более перехода. Пять адресов из первой группы получают органические входы. Возьмите их первыми. Для остальных проверьте назначение, статус и поисковый спрос. Глубокая страница может быть нормальной частью каталога, если у неё есть понятная навигация.
Найдите ближайшую страницу, на которой уместна ссылка. Статья о проверке дохода должна ссылаться на калькулятор рядом с примером, а каталог — на полезные категории. Текст ссылки поясняет, что откроется. Не вставляйте длинный список всех адресов в подвал ради сокращения глубины. Проверьте, проходит ли человек по новой цепочке без использования поиска по сайту.
Проверить до и после изменения
Повторите обход с теми же правилами. Сравните число входящих ссылок и кратчайший путь от главной. Если адрес не появился, откройте HTML страницы, которая должна на него ссылаться. Убедитесь, что URL стоит в обычном href и доступен без действий, которых сканер не совершает. Проверьте точный адрес после редиректа.
Храните в журнале исходную глубину, дату изменения и добавленную ссылку. Затем наблюдайте поисковые показы и полезные действия в группе исправленных страниц. Рост числа найденных адресов подтверждает исправление навигации. Для вывода о поисковом трафике нужно отдельное сравнение после того, как страницы будут обработаны. Для контроля выберите ещё пять похожих URL без новых ссылок и сравните динамику обеих групп за одинаковые недели. Если просели обе группы, проверьте сезонность и общие изменения каталога.
Документация: Рекомендации Google по ссылкам, Руководство Google по поиску.