Accueil > Solutions > Enjeux SEO > Éviter le gaspillage du budget de crawl

Éviter le gaspillage du budget de crawl

Augmentez la vitesse d’indexation de vos pages et améliorez la qualité de votre site pour les robots d’exploration

Crawl-frequency-oncrawl
438 355 000 lignes de log pour les bot hits et les visites SEO traitées quotidiennement
4 500 000 URLs qui n'ont pas eu besoin d'être explorées (Étude de cas)
x2,5 sur la fréquence de crawl (Étude de cas)

Avez-vous besoin d'optimiser votre budget de crawl ?

Google a déclaré à plusieurs reprises que de nombreux sites n’avaient pas besoin de se soucier de leur budget de crawl. Cependant, si vous avez un site de grande taille comme la plupart des sites d’offres d’emploi, de petites annonces ou un média en ligne, vous avez probablement constaté que vous avez suffisamment de pages pour que l’optimisation du budget de crawl puisse faire la différence sur ce sujet clé : l’indexation rapide des nouvelles pages.

rocket

Comment Oncrawl peut-il vous aider à indexer les pages plus rapidement ?

Vous voulez obtenir un meilleur positionnement plus rapidement en aidant Google et les autres moteurs de recherche à comprendre ce qui est important sur votre site. Vous souhaitez également tenir Googlebot à l’écart des parties de votre site qui ne devraient pas être indexées. Ce sont exactement les raisons pour lesquelles Oncrawl peut vous accompagner :

  • Suivi quotidien des sections du site qui consomment le plus/le moins de budget de crawl
  • Vérification du temps qui s’écoule entre le moment où une page est découverte par les moteurs de recherche et le moment où elle reçoit ses premières visites organiques
  • Assurance que vos pages prioritaires sont explorées lors de leur mise à jour
  • Vérification que les nouvelles pages sont explorées peu après leur publication
  • Identifier les différences entre le traitement de votre site par les différents moteurs de recherche : Google, Bing, Baidu ou Yandex

De quoi avez-vous besoin pour optimiser votre budget de crawl ?

SEO Crawler picto

Crawler SEO technique

Effectuez un crawl complet de votre site web pour comprendre comment vos pages prioritaires sont distribuées et vérifiez les attributs techniques qui les rendent accessibles à Googlebot.

En savoir plus
picto-log-analyzer

Analyseur de logs de SEO technique

Utilisez les logs pour révéler et surveiller le comportement des bots sur votre site afin de découvrir quelles sections sont le plus et le moins explorées.

En savoir plus
" J'essaie d'augmenter le nombre de pages indexées, donc je dois optimiser le budget de crawl que Google consacre à mes sites. Par exemple, je peux identifier les pages ayant une forte valeur, un contenu médiocre, un contenu dupliqué... les isoler et les mettre à jour... et ainsi optimiser le crawl. Oncrawl m'a permis de voir notre site comme le fait Google, et si vous voulez comprendre ce que Google veut, c'est indispensable. "
Julien Ferras Manager Projet SEO chez Lagardère

Des entreprises comme la vôtre utilisent Oncrawl pour éviter le gaspillage de leur budget de crawl