Beneloo Observatory
l'observatoire de la visibilité des PME belges dans ChatGPT, Claude, Gemini et Perplexity : 3 campagnes, 1 668 sociétés, 96 à 98 % invisibles.
Le produit
Mesurer, chiffres à l'appui, qui existe pour les IA.
- Rôle
- Conception & données
- Stack
- Python · Postgres · pipeline de campagnes immuable
- Statut
- En ligne
L'observatoire de la visibilité des PME belges dans ChatGPT, Claude, Gemini et Perplexity : 3 campagnes, 1 668 sociétés, 96 à 98 % invisibles.
L'Observatory interroge quatre modèles d'IA avec des prompts figés sur des échantillons exhaustifs de sociétés : 488 comptables namurois, 382 plombiers namurois, 798 comptables du Brabant wallon. Chaque mention est validée à la main (correct, réseau, hallucination). Résultat : 96,9 %, 98,4 % et 96,6 % d'invisibilité ; ChatGPT et Claude ne citent aucun cabinet local, Gemini hallucine jusqu'à 52 % de ses réponses.
01Le problème
Tout le monde parle de visibilité IA, personne ne la mesure.
Quand un particulier demande à ChatGPT ou Perplexity un comptable ou un plombier près de chez lui, qui est cité ? Les discours abondent, les chiffres manquent. Et sans mesure, impossible de dire à une PME si elle a un problème, ni s'il se corrige.
Il fallait un protocole reproductible : mêmes questions, mêmes modèles, échantillons exhaustifs, validation humaine de chaque nom cité.
02Ce que j'ai construit
Un pipeline de campagnes figées et une validation nom par nom.
L'Observatory interroge quatre modèles (ChatGPT, Claude, Gemini, Perplexity) avec des prompts gelés sur des populations entières : 488 comptables namurois, 382 plombiers namurois, 798 comptables du Brabant wallon. Chaque entité citée est rapprochée du registre officiel et classée : correcte, marque de réseau, hallucination.
Résultat : 96,9 %, 98,4 % et 96,6 % d'invisibilité. ChatGPT et Claude ne citent aucun cabinet local ; Gemini hallucine jusqu'à 52 % de ses réponses. Coût total des trois campagnes : moins de 5 euros d'API.
03Où ça en est
Trois campagnes publiées en interne, méthode documentée.
Les agrégats sont anonymisés et publiables ; le protocole de validation, les limites et les biais sont écrits. Le mur éditorial sépare strictement l'observatoire public du conseil Beneloo.
Prochaines étapes : nouveaux secteurs, contraste à deux secteurs publié, et le Beneloo Score qui applique cette mesure à une entreprise à la fois.