Googlebot будет сканировать и индексировать первые 15 МБ контента на странице

Google обновил англоязычную версию справки по Googlebot. В документ был добавлен абзац, в котором Google уточнил, что бот будет сканировать только первые 15 МБ страницы. 

В справочном документе по Googlebot появился раздел, в котором говорится: 

Googlebot может просканировать первые 15 МБ содержимого html-файла или поддерживаемого текстового файла. После первых 15 МБ файла Googlebot прекращает сканирование и рассматривает только первые 15 МБ контента для индексации. 

Напомним, ранее Google рассказал, что с точки зрения SEO в качестве разделения слов в URL лучше использовать дефисы/тире, а не нижние подчеркивания.  

Источник: Search Engine Land