Afin de parcourir la Toile, les moteurs de recherche utilisent des robots que l’on appelle de différentes façons : des bots, des crawlers, des spiders ou – en français – des agents.
Un bot informatique est un agent logiciel automatique ou semi-automatique qui interagit avec des serveurs informatiques. Un bot se connecte et interagit avec le serveur comme un programme client utilisé par un humain, d’où le terme « bot », qui est la contraction par aphérèse de « robot »
Chaque moteur de recherche utilise son propre robot ou encore son propre bot. Pour Google c’est le Googlebot, pour Bing c’est le BingBot.
