Réponse directe
Comparez les 30 derniers jours de synthèses par page de Measure > Analytics des crawlers aux URL SELF enregistrées dans Monitor > Source Explorer sur une période alignée. Une page avec des occurrences de crawlers et sans citation enregistrée est une piste à étudier, pas la preuve qu’un fournisseur l’a évaluée puis écartée.Données nécessaires
Utilisez les chemins normalisés reconstituables, l’identité des crawlers pris en charge, les tranches quotidiennes, les dates de première et dernière observation, les groupes de codes de statut, l’état de couverture, les réponses enregistrées, les URL citées enregistrées, les fournisseurs, les Topics et les prompts configurés. Excluez les chemins pseudonymisés du rapprochement des URL et documentez les redirections ou variantes.Méthode
1
Alignez les jeux de données
Choisissez des périodes comparables et normalisez le protocole, le nom d’hôte, la barre oblique finale, les paramètres, les redirections et les variantes canoniques.
2
Trouvez les URL seulement explorées
Repérez les pages reconstituables avec des occurrences de crawlers sur la période mais sans URL SELF citée correspondante dans les réponses enregistrées sélectionnées.
3
Vérifiez le contexte technique
Pour chaque candidate, vérifiez le statut de réponse, la configuration d’accès, la canonicalisation, la découvrabilité interne et les constats de Préparation du site.
4
Vérifiez la pertinence du contenu
Comparez la page aux prompts suivis et aux sources enregistrées pour ces réponses. Écartez les pages qui ne répondent pas au besoin observé.
Interprétation
Une occurrence de crawler correspond à une requête conservée dans un agrégat pour une identité User-Agent prise en charge. Elle n’établit ni indexation, ni entraînement, ni récupération, ni citation future. Une citation est une URL source enregistrée avec une réponse ; elle n’exige pas d’occurrence observée sur la période connectée.Actions possibles
- Si des variantes d’URL éclatent les données, testez la canonicalisation ou la normalisation du reporting avant de modifier le contenu.
- Si des occurrences en erreur reviennent, testez une correction technique et comparez les synthèses quotidiennes suivantes.
- Si l’accès est sain mais la pertinence faible, testez une mise à jour de contenu sur une cohorte de prompts définie.
Limites
Les jeux de données de crawlers et de citations ont des couvertures, durées de conservation et représentations d’URL différentes. Les synthèses par page conservent 30 jours d’analyse, les chemins pseudonymisés ne peuvent pas être rapprochés, et une partie de l’activité des fournisseurs n’expose pas d’identité User-Agent prise en charge. Aucune fréquence d’occurrences ne garantit une citation.Pages associées
Analytics des crawlers
Examinez l’activité observée des crawlers.
URL sources dans Looker Studio
Comparez les données au niveau des URL dans une source documentée.
Opportunités de contenu
Examinez les manques de contenu observés.
Du manque à l’article
Menez une expérience de contenu documentée.
Optimisation du site
Auditez l’accessibilité technique.
Pages citées par l’IA
Analysez les URL citées enregistrées.