Crawler (robot d’exploration)

Programme qui parcourt automatiquement le web en suivant les liens pour découvrir de nouvelles pages. Googlebot est le crawler de Google.

Informations sur le terme

Anglais
Crawler
Alias
Robot d’exploration · Robot d’indexation · Spider · Bot
Catégorie
Fondamentaux du SEO

Sources et références