Яндекс и Microsoft разработали протокол IndexNow, предлагающий новый способ взаимодействия сайтов с поисковыми системами. Он позволяет автоматически сообщать поисковым системам по API об изменениях на сайте: появлении новых страниц, обновлении или удалении уже проиндексированных страниц.
Особенности работы:
- Технологию поддерживают пока только Яндекс, Bing и Baidu.
- Воспользоваться протоколом может только владелец сайта.
- В одном POST-запросе можно передавать до 10 тыс. адресов.
- Можно отправлять страницы с любыми статусами: 200, 301, 302, 404, 410.
- Яндекс не рекомендует оправлять слишком часто один и тот же адрес. Если это необходимо, нужно сделать паузу в 10 минут между отправками.
- Также Яндекс использует алгоритмы, которые препятствуют слишком большому потоку запросов.
- Можно передавать страницы, которые изменились с начала поддержки IndexNow (официально с ноября 2021).
- Отправленные таким образом страницы будут обработаны в рамках того же краулингового бюджета. Каждый обход контента засчитывается в вашу квоту обхода контента. Поисковые системы обычно отдают предпочтение обходу контента этих URL-адресов по сравнению с другими URL-адресами, которые им известны.
Подробнее о том, как подключить протокол можно посмотреть в Справке Яндекса.
Источник:
Блог Яндекса для вебмастеров