Skip to main content

​
Réponse directe

Les indicateurs peuvent différer d’un fournisseur à l’autre parce que les réponses observées, le modèle, l’usage des sources, le dénominateur éligible ou la couverture des prompts diffèrent. Qwairy peut montrer où se situe l’écart, mais pas révéler les données d’entraînement ni la logique de classement internes d’un fournisseur.

​
Données nécessaires

  • Des prompts répondus appariés entre fournisseurs ou modèles
  • Les identifiants des fournisseurs et des modèles
  • Des filtres identiques de période, pays, langue, Topic, Tag et étape du tunnel
  • Les numérateurs et dénominateurs bruts de chaque indicateur
  • Des réponses et citations représentatives de chaque fournisseur

​
Méthode

  1. Dans Cockpit > Vue d’ensemble, fixez un périmètre et comparez un indicateur à la fois.
  2. Vérifiez que chaque fournisseur a des nombres comparables de réponses terminées et de prompts répondus.
  3. Dans Cockpit > GEO Matrix, repérez les prompts et Topics qui produisent l’écart.
  4. Séparez les modèles de chaque fournisseur au lieu de les regrouper sous le nom de la famille.
  5. Lisez les réponses sous-jacentes dans Monitor > Analyse des réponses et examinez les sources dans Monitor > Source Explorer.
  6. Recalculez la comparaison après avoir exclu les observations manquantes ou non appariées.

​
Interprétation

Dans le produit, le Taux de mention et le Taux de citation se calculent au niveau des réponses, avec des dénominateurs de réponses éligibles différents ; la Couverture se calcule au niveau des prompts et la Part de voix compte les occurrences de mentions. Un fournisseur peut donc se classer différemment selon l’indicateur sans aucune incohérence. Privilégiez les composantes brutes à un score combiné pour diagnostiquer un écart. Un petit dénominateur peut amplifier une seule réponse, et des réponses manquantes ne sont pas des absences de la marque.

​
Actions possibles

  • Vérifiez si l’écart persiste sur une cohorte de prompts appariée.
  • Étudiez le Topic ou le modèle qui explique l’essentiel de l’écart.
  • Examinez les différences de sources comme explication possible, sans les traiter comme des causes avérées.
  • Ajustez le suivi lorsqu’un fournisseur a une couverture incomplète, puis collectez un échantillon comparable.
Documentez l’hypothèse et conservez le périmètre pour la prochaine comparaison.

​
Limites

  • Les réponses des fournisseurs peuvent varier d’une exécution à l’autre.
  • La disponibilité des fournisseurs et des modèles peut varier selon le marché.
  • Qwairy observe les réponses et les citations exposées, pas les systèmes internes des fournisseurs.
  • Les scores agrégés peuvent masquer des écarts propres à un indicateur ou à un prompt.

​
Pages associées