Méthodologie
Mesurer sa visibilité dans les assistants IA, honnêtement
Les réponses des assistants IA ne sont ni stables ni personnalisables à volonté. Voici comment nous en tirons une mesure utile, et ce qu'il ne faut pas leur faire dire.
1. Pourquoi une seule question ne suffit pas
- Les réponses varient d'un essai à l'autre. Les modèles de langage tirent leurs réponses avec une part
d'aléatoire. Même avec les réglages prévus pour cela, OpenAI indique que le déterminisme
is not guaranteed
(référence de l'API OpenAI, paramètreseed). - La recherche web change tout. Avec la recherche activée, l'assistant reformule votre question en une ou plusieurs recherches et cite des pages ; OpenAI précise que les résultats et citations peuvent être incomplets, datés ou erronés (aide ChatGPT).
- Le contexte compte : compte connecté, mémoire, pays, langue, version du modèle.
Conséquence : nous répétons chaque requête plusieurs fois et nous raisonnons en taux (« cité dans 4 essais sur 6 »), jamais sur une capture d'écran isolée.
2. Le protocole
- Jeu de requêtes construit avec vous : requêtes de marque (votre nom), requêtes de catégorie (« meilleur [activité] à [ville] »), requêtes de besoin (le problème du client avec ses mots), requêtes comparatives.
- Plusieurs essais par requête et par assistant, dans des sessions indépendantes, à la même période.
- Relevé structuré de chaque réponse : entreprise citée ou non, position, exactitude des faits (activité, adresse, prix, horaires), sources citées, concurrents cités.
- Vérification humaine des faits relevés par rapport à vos informations officielles.
- Diagnostic : rapprochement avec la check-list GEO (robots.txt, cohérence des informations, sources tierces).
3. Les indicateurs
| Indicateur | Définition |
|---|---|
| Taux de mention | Part des réponses qui citent votre entreprise, par type de requête |
| Taux d'exactitude | Part des mentions sans erreur factuelle importante |
| Part de citation de votre site | Part des réponses avec sources qui citent votre site officiel |
| Présence des concurrents | Entreprises citées à votre place, et sources utilisées pour elles |
| Erreurs récurrentes | Informations fausses qui reviennent (prix, adresse, offre), avec leur source probable |
4. Les limites, dites clairement
- API et applications grand public peuvent différer. Le rapport payant interrogera les assistants via leurs API officielles : c'est la seule méthode reproductible et conforme à leurs conditions d'utilisation. Vos clients, eux, utilisent les applications grand public, dont les réponses peuvent être différentes. Nous le signalons dans chaque rapport et le vérifions par quelques contrôles manuels.
- Une photographie datée, pas une garantie : les modèles et leurs sources évoluent sans préavis.
- Pas de lien de cause à effet démontré entre une action précise et une citation par une IA : nous proposons des actions de bon sens, fondées sur la documentation officielle des éditeurs.
5. Ce que nous refusons de faire
- Collecter automatiquement les interfaces grand public (ChatGPT, aperçus IA de Google…) : ce n'est pas conforme à leurs conditions d'utilisation.
- Promettre une place dans les réponses d'une IA.
- Produire de faux avis ou des contenus trompeurs destinés aux IA.
6. Le faire vous-même
Le kit gratuit en 10 prompts applique une version simplifiée de ce protocole, manuellement, dans les applications que vous utilisez déjà. C'est le meilleur point de départ.