Google Bot

Googlebot est le robot d'indexation utilisé par Google pour explorer le web et ajouter des pages web à l'index du moteur de recherche. Ce robot visite les pages qu'il découvre en suivant les liens ou lorsqu'il découvre des adresses web sur une page. Par ailleurs, le robot peut aussi visiter les pages qui sont indiquées dans un fichier Sitemap.

User Agent
Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)