В карте сайта обнаруживаются результаты внутреннего поиска, страницы с параметрами, старые переходы и адреса «спасибо за заявку». Такое случается, когда sitemap собирают из всего, что умеет открывать движок. Файл технически существует, но перестаёт выражать редакционный выбор: какие страницы компания хочет представить в поиске.
Карта сайта — не склад всех маршрутов приложения. Google рекомендует включать туда предпочтительные канонические URL, которые нужно показывать в результатах поиска. При этом отправка sitemap остаётся подсказкой и не гарантирует обход или индексирование.
Выгрузите список адресов и добавьте поля: тип страницы, конечный ответ, доступность для индексирования, canonical и решение. Не удаляйте записи только по слову в пути. Например, раздел с названием search может быть полноценным руководством о поиске, а не служебной выдачей.
Для каждого типа сформулируйте правило на человеческом языке. «Включаем действующие страницы услуг с самостоятельным содержанием» понятнее, чем набор исключений, смысл которых помнит один разработчик.
Тип адреса: Действующая услуга. Ожидаемое решение: Оставить предпочтительный URL. Что дополнительно проверить: Полноту содержания и self-canonical.
Тип адреса: Статья, открытая для поиска. Ожидаемое решение: Оставить. Что дополнительно проверить: Отсутствие случайного noindex.
Тип адреса: Страница благодарности. Ожидаемое решение: Обычно исключить. Что дополнительно проверить: Не содержит ли публичную самостоятельную информацию.
Тип адреса: Параметрическая копия. Ожидаемое решение: Обычно исключить копию. Что дополнительно проверить: Какой адрес выбран основным.
Тип адреса: Постоянный редирект. Ожидаемое решение: Заменить конечным URL. Что дополнительно проверить: Смысловую уместность назначения.
Тип адреса: Удалённый материал. Ожидаемое решение: Исключить. Что дополнительно проверить: Правильность ответа и внутренних ссылок.
Это рабочие ожидания для обычного сайта услуг, а не универсальный запрет на определённые названия маршрутов. Решение зависит от назначения страницы.
Первая — убрать URL из sitemap и считать его закрытым для поиска. Страница может оставаться доступной по внутренним или внешним ссылкам. Если нужно ограничить индексирование либо доступ, для этого принимают отдельное техническое решение.
Вторая — оставить в карте только «красивые» адреса, которые на деле перенаправляют, возвращают ошибку или показывают пустой шаблон. Синтаксически корректный XML не подтверждает качество перечисленных страниц. Проверяйте фактический ответ конечного адреса.
Работу стоит начинать с небольшой выборки разных типов, затем применять подтверждённые правила ко всему списку. Так меньше риск исключить полезный раздел из-за неверного предположения о структуре сайта.
Поле lastmod имеет смысл, когда отражает реальное существенное изменение страницы. В официальном руководстве Google указано, что это значение используется, если оно последовательно и проверяемо точно. Ежедневная подстановка сегодняшней даты для всех материалов не сообщает, что именно обновилось.
Разделите техническую пересборку сайта и изменение содержания. Замена версии библиотеки сама по себе не означает, что переписан текст услуги. Если система не умеет надёжно определять дату, лучше обсудить способ её формирования, чем заполнять поле произвольным временем.
Для маркетингового аудита агентства Эйч такая таблица полезна ещё и как инвентаризация: становится видно, какие публичные материалы существуют и кто отвечает за их актуальность.
Сравните списки до и после изменения. У каждого исключённого типа должно быть объяснение, у каждого добавленного — самостоятельное назначение. Проверьте абсолютные адреса, корректность формата, доступность самого файла и отсутствие случайных ссылок на тестовый домен.
Затем проверьте несколько страниц каждого класса: услугу, статью, архив, редирект, служебный экран. Одна удачная проверка главной не подтверждает весь генератор. Если используются несколько карт и индексный файл, убедитесь, что ссылки между ними актуальны.
Финальный результат формулируется скромно и точно: карта содержит выбранные действующие URL и согласована с правилами сайта. Решение поисковой системы о включении страниц в индекс остаётся отдельным наблюдением, за которым следят после обновления.