AJAX-запросы (то есть XHR) теперь включены в список операций, расходующих краулинговый бюджет. Об этом представитель компании Гэри Илш (Gary Illyes) сообщил в Twitter.
JFYI: based on @ajkohn 's recommendation, i added AJAX/XHR calls explicitly to the list of things that will consume your site's crawl budget.https://t.co/kVYj6XaNn0
— Gary "鯨理" Illyes (@methode) 23 апреля 2019 г.
«Я добавил вызовы AJAX/XHR в список вещей, которые могут тратить краулинговый бюджет сайта»
Напомним, Google планирует отказаться от директивы noindex в robots.txt.
Источник: Search Engine Roundtable