Robots и Sitemap
Robots и Sitemap
@robots_sitemap_ru_n1k

Карта сайта — не список всех адресов, которые существуют. Это список тех, которые вы считаете достойными выдач

Карта сайта — не список всех адресов, которые существуют. Это список тех, которые вы считаете достойными выдачи.

Туда попадают только страницы, отвечающие всем условиям сразу:

— отдают успешный код ответа, а не ошибку и не переадресацию;
— канонические, то есть не копии другой страницы;
— открыты для обхода и не помечены запретом на индексацию;
— имеют самостоятельную ценность, а не собраны автоматически из фильтров и сортировок.

Смешанная карта, где половина адресов ведёт в никуда, работает против вас. Система тратит обход на мусор и постепенно перестаёт доверять файлу как источнику.

Отдельно про полноту. Отсутствие страницы в карте не запрещает её индексировать: карта — подсказка, а не разрешение. Поэтому «уберём из карты» не способ спрятать раздел.

Самая полезная привычка — сверять карту с реальностью регулярно, а не в момент создания. Сайт меняется, страницы удаляются и переезжают, а файл, собранный однажды руками, устаревает быстрее, чем кажется.
Этот пост опубликован в Telegram-канале Robots и Sitemap. Подписаться можно по ссылке: @robots_sitemap_ru_n1k.
tech

Свежие посты в категории «Tech Infrastructure»

Все каналы категории →

start

Готовы запустить рекламу через сеть public.tg?

Новый оффер, продукт, GEO, кейс, событие или партнёрский запуск — соберём маршрут под задачу и отдадим медиаплан.

Telegram для медиаплана: @AFFtop_connect. Быстрый тест: $20 за канал, $1000 за пакет по сети.