Карта сайта — не список всех адресов, которые существуют. Это список тех, которые вы считаете достойными выдачи.
Туда попадают только страницы, отвечающие всем условиям сразу:
— отдают успешный код ответа, а не ошибку и не переадресацию;
— канонические, то есть не копии другой страницы;
— открыты для обхода и не помечены запретом на индексацию;
— имеют самостоятельную ценность, а не собраны автоматически из фильтров и сортировок.
Смешанная карта, где половина адресов ведёт в никуда, работает против вас. Система тратит обход на мусор и постепенно перестаёт доверять файлу как источнику.
Отдельно про полноту. Отсутствие страницы в карте не запрещает её индексировать: карта — подсказка, а не разрешение. Поэтому «уберём из карты» не способ спрятать раздел.
Самая полезная привычка — сверять карту с реальностью регулярно, а не в момент создания. Сайт меняется, страницы удаляются и переезжают, а файл, собранный однажды руками, устаревает быстрее, чем кажется.
Robots и Sitemap
@robots_sitemap_ru_n1k
Карта сайта — не список всех адресов, которые существуют. Это список тех, которые вы считаете достойными выдач
Этот пост опубликован в Telegram-канале Robots и Sitemap. Подписаться можно по ссылке: @robots_sitemap_ru_n1k.