19.7 C
Санкт-Петербург
Четверг, 7 июля, 2022

GoogleBot не использует Nutch

На днях SEO-консультант Бритни Мюллер (Britney Muller) заметила нового агента пользователя – Googlebot/Nutch-1.7. Она написала об этом в Twitter и попросила сотрудника Google Джона Мюллера прокомментировать, действительно ли такой user-agent существует.

https://twitter.com/BritneyMuller/status/1311806990457298944

По словам Мюллера, Google вообще не использует Nutch в агентах пользователя Googlebot – ни для поиска, ни для других вариантов использования общей инфраструктуры.

https://twitter.com/JohnMu/status/1311897097684295681

Поэтому, если в журналах сервера появился такой агент пользователя, то это не настоящий Googlebot, и при необходимости его можно заблокировать.

Источник


Читать также:  Сооснователь Яндекса Аркадий Волож обжалует санкции ЕС

Похожие статьи

НОВОЕ НА САЙТЕ