Comment Zurich Insurance UK fait le monitoring de la recherche IA avec Oncrawl

Alors que la recherche basée sur l’IA gagnait en importance et commençait à transformer la manière dont les utilisateurs trouvent des informations, Zurich Insurance UK a reconnu la nécessité de comprendre le comportement des robots IA sur son site web.

L’équipe Search Marketing a souhaité obtenir des informations sur l’interaction de plateformes telles que ChatGPT, Perplexity et Google AI Overviews avec le contenu de leur site.

Découvrez comment Zurich Insurance UK a pu utiliser Oncrawl pour résoudre son problème.

Les challenges

L’équipe de Zurich a rencontré plusieurs défis liés à la recherche IA. Les analyses traditionnelles n’ont pas pu révéler :

• Accès des bots IA : Il était impossible de distinguer les bots IA du trafic normal, ce qui empêchait Zurich de voir comment ces bots interagissaient avec son site.
• Exactitude des citations : Lorsque les outils IA font référence à des informations sur les assurances, l’exactitude de ces informations est primordiale. L’équipe devait identifier les contenus auxquels les bots IA accédaient afin de vérifier que les citations étaient correctes.
• Utilisation des ressources : Sans pouvoir voir quelles ressources ChatGPT et d’autres bots IA avaient été crawlées, les opportunités d’optimiser ou de restreindre l’accès en conséquence passaient inaperçues.
• Différents objectifs des bots : Tous les bots IA n’ont pas le même objectif. L’équipe souhaitait distinguer les bots d’entraînement, les bots de recherche et les requêtes initiées par les utilisateurs afin de procéder à une optimisation appropriée.

La solution

Zurich a commencé à utiliser les fonctionnalités de monitoring des robots IA d’Oncrawl pour répondre à ses questions. En analysant les fichiers de logs, l’entreprise a obtenu une visibilité complète sur le comportement des moteurs de recherche IA et a suivi plusieurs robots IA dans ses logs.

Grâce au tableau de bord dédié d’Oncrawl, ils ont pu distinguer trois catégories distinctes d’activité des robots IA :

• Robots d’entraînement : pour le développement de modèles
• Robots de recherche : pour l’indexation asynchrone
• Robots utilisateurs : pour les requêtes en temps réel

Exemple de tableau de bord

Le tableau de bord montrait également quels robots IA avaient accédé à des contenus spécifiques, y compris des PDF et des ressources qui n’apparaissaient pas dans les analyses traditionnelles.

De plus, l’équipe a utilisé Oncrawl pour comparer l’activité des robots IA avec les recherches zéro-clic et les impressions, identifiant ainsi les contenus utilisés pour générer des réponses IA et donnant la priorité à l’optimisation des pages à forte valeur ajoutée.

Les resultats

« Oncrawl s’est révélé extrêmement précieux en fournissant des informations techniques et des analyses plus approfondies. Les rapports de recherche basés sur l’IA, les alertes et le monitoring permettent de gagner beaucoup de temps. Cela me permet de signaler des exemples qui pourraient ne pas apparaître dans les analyses traditionnelles et de recommander des améliorations techniques ou de contenu. »