Топ питань
Часова шкала
Чат
Перспективи
Googlebot
програмне забезпечення З Вікіпедії, вільної енциклопедії
Remove ads
Googlebot — це пошуковий робот, створений Google, який збирає документи з інтернету для будівництва пошукового індексу пошуковика Google.
Якщо вебмайстер бажає обмежити інформацію на своєму сайті для Googlebot, він може використати файл robots.txt або метатег noindex.[1]
Googlebot ідентифікує себе через стрічку user agent, в якій міститься слово googlebot.
Посилання
Див. також
Wikiwand - on
Seamless Wikipedia browsing. On steroids.
Remove ads