
Представитель Google Джон Мюллер рассказал у себя в Twitter о том, что GoogleBot обычно не передает реферер, так как предпочитает напрямую обращаться к URL. Также он добавил, что, если речь идет о встраиваемом контенте (скрипты, css и проч.), лучше проверить логи.
@JohnMu @KazushiNagayama I understand Googlebot doesn't send a referrer. It always accesses urls directly. Am I correct?
— Kenichi Suzuki; 鈴木謙一 (@suzukik) 10 августа 2017 г.
Стоит отметить, что, если вы зашли на страницу сайта, набрав адрес в браузере, поле реферера останется пустым.
Источник: Search Engine Roundtable