- Idée centrale : dans les moteurs IA, une même requête peut donner des réponses différentes d'une fois à l'autre, selon le moment, la formulation et le hasard de génération.
- Conséquence directe : une mesure unique de votre visibilité GEO (vous testez une fois, vous notez si vous êtes cité) est peu fiable. Vous photographiez un tirage, pas une réalité stable.
- La bonne approche : répéter les relevés et raisonner en distribution (à quelle fréquence suis-je cité ?), pas en oui/non ponctuel.
- Précision d'honnêteté : c'est une note conceptuelle. Le résumé public ne contient aucun chiffre. Je la traite donc comme un principe de méthode solide, pas comme une source de données. C'est aussi pour ça qu'elle est volontairement courte ici.
Voici une erreur que je vois faire en permanence, y compris par des gens sérieux : on tape sa requête dans ChatGPT, on regarde si sa marque est citée, et on conclut « ça marche » ou « ça ne marche pas ». Le problème, c'est que si vous reposez exactement la même question cinq minutes plus tard, la réponse, et la liste des sources, peut avoir changé.
La note déposée sur arXiv en avril 2026 par Julius Schulte, Malte Bleeker et Philipp Kaufmann, sous le titre Don't Measure Once: Measuring Visibility in AI Search, met des mots sur ce piège. Elle est courte et sans données chiffrées, mais son principe est important, alors je lui consacre une note brève.
Le problème : la recherche IA n'est pas stable
Sur un moteur classique, une requête donne un classement à peu près stable : une seule observation suffit souvent à savoir où vous vous situez face à vos concurrents. Les moteurs génératifs cassent ce repère. Par nature, ils sont probabilistes : la même question peut produire des réponses qui varient selon les exécutions, les reformulations et le temps.
La réponse : penser en distribution
La proposition des auteurs est simple à énoncer : arrêter de chercher une réponse binaire et caractériser la visibilité comme une distribution. Concrètement, cela revient à se poser une autre question. Non pas « suis-je cité ? » mais « sur dix, vingt, cinquante relevés répartis dans le temps, dans quelle proportion suis-je cité ? ».
C'est une différence de nature, pas de degré. Un taux de présence (par exemple « cité dans 6 réponses sur 10 ») porte une information ; un simple oui/non n'en porte presque aucune, parce qu'il dépend trop du tirage.
Ce qu'on peut en tirer concrètement
- Répétez vos relevés. Une mesure de visibilité IA digne de ce nom répète la même requête plusieurs fois, à des moments différents, plutôt qu'une seule.
- Variez les formulations. Les utilisateurs ne posent pas tous la question de la même façon. Tester plusieurs reformulations donne une image plus juste que la vôtre, unique.
- Raisonnez en fréquence. Suivez un taux de présence (mention rate) dans le temps, pas un statut figé. C'est ce taux qui bouge quand vos optimisations agissent.
- Méfiez-vous des captures uniques. Une capture d'écran qui montre votre marque citée est un argument faible : elle prouve que c'est arrivé une fois, pas que c'est régulier.
Ma lecture
Le principe me paraît juste et utile, et il recoupe ce que d'autres travaux du site montrent avec des chiffres. SISTRIX mesure que ChatGPT Search renouvelle une grande partie de ses sources chaque semaine : la volatilité dont parle cette note n'est pas une vue de l'esprit, elle est quantifiée ailleurs. La contribution propre de Schulte et al. est de la formuler comme une règle de mesure : ne pas mesurer une fois.
Je reste mesuré sur une chose : comme le résumé public ne donne ni méthodologie chiffrée ni protocole détaillé, je ne lui fais pas porter plus que ce qu'elle dit. C'est une bonne piqûre de rappel méthodologique, pas une étude de données. D'où le format court de cette fiche, assumé.
Sources
- arXiv | Don't Measure Once: Measuring Visibility in AI Search (Julius Schulte, Malte Bleeker, Philipp Kaufmann, avril 2026) - source primaire.
- SISTRIX (citation drift) - la volatilité des sources citées, mesurée semaine après semaine.
- Mesurer sa visibilité IA - méthode pratique de relevé, gratuite.
- KPIs GEO - dont le mention rate, la métrique de fréquence à suivre.
- Retour au hub : toutes les études GEO