Жили-были Гуглоботы - братья удалые,
Не чуралися работы, сайты спайдерили.
Из былины конца прошлого тысячелетия
Не чуралися работы, сайты спайдерили.
Из былины конца прошлого тысячелетия
Googlebot - это робот Google, сканирующий Интернет. Он собирает в сети документы для построения индекса с возможностью поиска для поисковой системы Google. От нефиг делать решил глянуть как же выглядит этот Гуглобот. Наглядных изображений робота вышло не густо.
Этот Googlebot с Хабрахабра не любит Mail.Ru и Yandex.
Тихо в сети, только не спит GoogleBot.
Список URL’ов получил GoogleBot,
вот и не спит GoogleBot.
Комментариев нет:
Отправить комментарий