Pour chaque secteur, nous interrogeons quatre moteurs génératifs avec un corpus de prompts représentatifs des questions réellement posées par les clients. Nous relevons quelles marques sont citées, à quelle fréquence et avec quelle part de voix. Tout le protocole est documenté et rejouable.
Nos trois principes
Transparence. Chaque baromètre publie son corpus de prompts, ses moteurs, sa période et son mode de calcul. Quiconque doit pouvoir refaire la mesure et retrouver des résultats comparables.
Indépendance. L'Observatoire ne vend aucune place dans ses classements et n'accepte aucune contrepartie pour modifier un résultat. Les marques mesurées ne sont pas clientes du classement.
Honnêteté sur les limites. Les moteurs génératifs sont variables par nature. Nous documentons cette variabilité plutôt que de la masquer.
Le protocole, étape par étape
Construction du corpus de prompts
Pour chaque secteur, nous établissons une liste de questions représentatives des intentions réelles des clients — recommandations de prestataires, comparaisons, demandes d'information. Le corpus est figé avant la mesure et publié avec le baromètre.
Interrogation des quatre moteurs
Chaque prompt est soumis aux quatre principaux moteurs génératifs, dans des conditions standardisées (session neutre, sans historique ni personnalisation), afin que les réponses reflètent le comportement par défaut.
Relevé des mentions et des sources
Pour chaque réponse, nous notons les marques citées, la manière dont elles sont décrites et les sources référencées. Chaque prompt est répété sur plusieurs itérations pour lisser la variabilité.
Calcul des indicateurs et publication
Nous agrégeons les relevés en deux indicateurs — taux de mention et part de voix — puis publions le classement sectoriel accompagné de sa méthodologie et de sa période de mesure.
Les moteurs mesurés
Ces quatre moteurs concentrent l'essentiel des usages de recherche conversationnelle dans l'espace francophone. La liste pourra évoluer avec le marché ; chaque évolution sera documentée dans l'historique des versions de cette méthodologie.
Ce que nous mesurons
La proportion de réponses, sur l'ensemble du corpus, dans lesquelles une marque est citée. Il ne s'agit pas d'un classement fixe mais d'une fréquence d'apparition.
Le poids relatif d'une marque face à ses concurrents : sur l'ensemble des mentions d'un secteur, quelle part revient à chacun.
Limites assumées
Aucune mesure n'est parfaite, et le prétendre serait contraire à notre démarche. Nous reconnaissons les limites suivantes :
- Les moteurs génératifs sont non déterministes : une même question peut produire des réponses différentes. Nous y répondons par la répétition et l'agrégation, sans pour autant l'éliminer.
- Les modèles évoluent en continu ; un baromètre est une photographie à une date donnée, pas une vérité permanente. D'où sa fréquence de publication.
- Les réponses peuvent dépendre de la formulation du prompt ; notre corpus vise la représentativité, pas l'exhaustivité.
- Les résultats reflètent le comportement par défaut des moteurs, hors personnalisation propre à chaque utilisateur.
Reproductibilité
Chaque baromètre est accompagné de son corpus de prompts complet et de sa période de mesure. Un tiers disposant de ces éléments peut rejouer la mesure et confronter ses résultats aux nôtres. C'est cette exigence, davantage que le volume, qui distingue l'Observatoire.
Bientôt : le Baromètre sectoriel
Le premier volet du Baromètre de la Visibilité IA est en préparation. Pour comprendre les principes du GEO avant sa parution, commencez par notre dossier de référence.
Qu'est-ce que le GEO ? →