Джон Мюллер: GoogleBot обычно не передает реферер

.

Представитель Google Джон Мюллер рассказал у себя в Twitter о том, что GoogleBot обычно не передает реферер, так как предпочитает напрямую обращаться к URL. Также он добавил, что, если речь идет о встраиваемом контенте (скрипты, css и проч.), лучше проверить логи.

@JohnMu @KazushiNagayama I understand Googlebot doesn't send a referrer. It always accesses urls directly. Am I correct?

— Kenichi Suzuki; 鈴木謙一 (@suzukik) 10 августа 2017 г.

Стоит отметить, что, если вы зашли на страницу сайта, набрав адрес в браузере, поле реферера останется пустым.

Источник: Search Engine Roundtable