La crawlabilité et l’indexation sont deux étapes réalisées par la plupart des moteurs de recherche lors de la collecte et le traitement des informations afin de pouvoir les utiliser dans les résultats de recherche. La capacité d’exploration (crawlabilité) désigne la capacité d’un moteur de recherche à accéder au contenu d’une page et à l’explorer. Un site crawlable permet aux robots des moteurs de recherche d’effectuer leurs tâches de base : découvrir qu’une page existe grâce à des liens pointant vers elle, atteindre une page à partir des principaux points d’entrée du site, (comme la page d’accueil), examiner le contenu de la page et trouver des liens vers d’autres pages.
L’indexabilité, quant à elle, décrit les caractéristiques et les signaux qui communiquent à un moteur de recherche que le contenu devrait être ajouté au catalogue des pages pouvant être positionnées.
Utiliser un crawler SEO vous aide à comprendre comment les moteurs de recherche voient votre site web. Par exemple, avec Oncrawl vous n’avez pas simplement accès à des tableaux de bord sur les parties du site qui sont indexables et lesquelles ne le sont pas, et pourquoi, mais vous pouvez également découvrir les erreurs de crawl ou encore détailler les liens entre les caractéristiques techniques, l’indexation et le positionnement final.
