Qu'est-ce qu'un crawler ?

Article écrit par Julien Gourdon
ancien journaliste et consultant SEO depuis 2015

Un crawler en SEO est un programme informatique utilisé par les moteurs de recherche pour parcourir les pages des sites Web et collecter des informations sur leur contenu et leur structure. Le crawler analyse les pages Web, suivant les liens entre elles pour créer une carte des sites visités. Ces informations sont utilisées par les moteurs de recherche pour indexer les pages et améliorer leur classement dans les résultats de recherche.