Comment Proofsource mesure la visibilité IA.
Proofsource mesure la visibilité IA comme la part de vraies réponses de l’IA qui mentionnent votre marque, posées comme le font vos acheteurs, sur ChatGPT, Perplexity, Claude et Google AI Overviews. Chaque pourcentage est assorti d’un intervalle de Wilson à 95 %, chaque chiffre renvoie aux réponses qui le fondent, et les chiffres que nous ne pouvons pas encore étayer suffisamment sont retenus, pas estimés.
Trois règles derrière chaque chiffre
Un intervalle de Wilson sur chaque pourcentage, pour voir à quelle distance le vrai taux peut se trouver du taux mesuré.
Wilson (1927), l’intervalle de référence pour une proportionmoteurs interrogés avec les mêmes questions : ChatGPT, Perplexity, Claude et Google AI Overviews.
Toutes les offres, essai gratuit comprisdes chiffres s’ouvrent sur les réponses qui les fondent, avec le texte intégral et chaque page citée par chaque moteur.
Tous les rapports, dans toutes les offresQue compte Proofsource ?
- Taux de mention : la part des réponses à une question qui citent votre marque, par moteur et au global.
- Qui est cité à votre place : toutes les autres marques des mêmes réponses, classées par fréquence d’apparition.
- Position : l’endroit de la réponse où votre marque apparaît quand elle est citée.
- Citations : les pages web que chaque moteur liste comme sources, et celles qui vous mentionnent.
Chaque réponse est conservée avec son texte complet et ses sources, pour que chaque chiffre puisse être relié aux réponses qu’il compte. Les termes sont définis dans le glossaire de la visibilité IA.
Comment les questions sont-elles posées ?
Vous validez une série de questions d’achat : des questions de catégorie sans marque, comme « quel est le meilleur outil pour X », plus quelques questions qui mentionnent votre marque. Chacune est posée sur chaque moteur du panel, formulée de la même façon partout, pour que les moteurs soient comparables.
Avec une offre quotidienne, chaque question passe une fois par moteur chaque jour ; les offres hebdomadaires et mensuelles tournent moins souvent. L’essai gratuit réalise 2 analyses, aujourd’hui et demain, avec 25 questions sur chaque moteur. Les questions sans marque sont le vrai test : une question qui nomme votre marque la mentionnera, que le moteur sache ou non qui vous êtes.
Quelle est la fiabilité de chaque chiffre ?
Un moteur IA peut donner deux réponses différentes à la même question à une minute d’intervalle : une réponse est donc un échantillon, pas un fait. Un pourcentage calculé sur une poignée de réponses peut être très éloigné du vrai taux.
Proofsource associe un intervalle de score de Wilson à 95 % à chaque pourcentage. Mentionné dans 6 réponses sur 20, cela fait 30 %, avec un intervalle d’environ 14,5 % à 51,9 %. Mentionné dans 60 sur 200, cela fait aussi 30 %, mais l’intervalle se resserre à environ 24,1 % à 36,7 %. C’est l’échantillonnage quotidien qui le resserre, et un changement n’est signalé qu’une fois sorti de l’intervalle.
L’intervalle de Wilson a été introduit en 1927 (Wilson, Journal of the American Statistical Association) et c’est le choix standard pour une proportion issue d’un petit échantillon, car il reste fiable près de 0 % et de 100 %. Ce qu’il signifie en clair, la formule et les articles qui le recommandent : Ce que signifie l’intervalle à 95 %.
Comment les scores principaux sont-ils calculés ?
Chaque rapport affiche un score par domaine, de 0 à 100. Chacun est une moyenne pondérée des parties mesurées. Une partie que nous n’avons pas pu mesurer est exclue et signalée, jamais notée zéro. Avec trop peu de preuves, le score indique « pas assez de données ».
Score technique
Formule. round( somme(poids x score du domaine) / somme(poids des domaines mesurés) ), chaque score de domaine = round(100 x (réussis + 0,5 x avertissements) / contrôles déterminés)
- Exploration et indexation (poids 25). Score du domaine issu de l’audit du site. Le point de passage obligé : une page qui ne peut être ni récupérée, ni canonisée, ni indexée ne peut ni se classer ni être citée.
- Liens et architecture (poids 10). Score du domaine issu de l’audit du site. Les liens internes décident des pages que les robots atteignent ; un lien cassé coûte moins cher qu’une page non indexable.
- Données structurées et partage (poids 15). Score du domaine issu de l’audit du site. Comment les machines lisent la page sans deviner.
- Performance (poids 15). Score du domaine issu de l’audit du site. La vitesse et les Core Web Vitals influent directement sur le classement et l’abandon, et ils sont mesurés.
- Sécurité et confiance (poids 10). Score du domaine issu de l’audit du site. Un socle de confiance que la plupart des sites respectent, donc peu discriminant.
- On-page et contenu (poids 15). Score du domaine issu de l’audit du site. Les titres, descriptions, intertitres et le contenu principal sont ce sur quoi une page est mise en correspondance.
- Accès pour la recherche IA (poids 10). Score du domaine issu de l’audit du site. Si les robots d’indexation IA peuvent lire le site et si un llms.txt existe.
Données manquantes. Un domaine comptant moins de 3 contrôles déterminés est écarté et les poids sont renormalisés. Si moins de 60 des 100 points de poids sont mesurés, ou sans exploration et indexation, le rapport indique que les données sont insuffisantes et n’affiche aucun score.
Incertitude. Un audit est un recensement des pages explorées, pas un échantillon : il n’y a donc pas d’intervalle d’échantillonnage. La fourchette est une borne déterministe : le score si tous les contrôles indéterminés avaient échoué, et s’ils avaient tous réussi.
Score SEO
Formule. round( somme(poids x score de la partie) / somme(poids des parties mesurées) ), parties mesurées uniquement
- Visibilité dans la recherche : mots-clés classés (poids 10). log10(1 + mots-clés classés), 10 000 mots-clés valent 100. À quel point le site est trouvé largement ; échelle logarithmique.
- Visibilité dans la recherche : tranches de position (poids 15). Poids de clic moyen des mots-clés classés par tranche de position, 0,25 vaut 100. À quel point le site se classe bien là où il est trouvé.
- Visibilité dans la recherche : visites mensuelles estimées (poids 20). log10(1 + visites estimées), 100 000 valent 100. Le résultat du classement ; une estimation du fournisseur.
- Autorité : domaines référents face aux concurrents désignés (poids 25). 50 x domaines référents de la marque / médiane des concurrents désignés, plafonné à 100. Les liens sont le signal off-page le plus fort, jugé par rapport aux concurrents désignés par le client.
- On-page (poids 20). Le score du domaine on-page et contenu issu de l’audit du site. Ce que le site maîtrise dans la façon dont une page est associée à une requête.
- Qualité du contenu (poids 10). Score moyen vérifié du juge de qualité des pages, uniquement lorsqu’une exécution complète existe. Une évaluation par LLM, sur option, d’un échantillon de pages : l’entrée la moins déterministe.
Données manquantes. Une partie non mesurée est écartée, jamais devinée, et le reste est renormalisé. Sans partie visibilité dans la recherche mesurée, ou sous 50 des 100 points de poids, le rapport indique que les données sont insuffisantes.
Incertitude. Les classements, le trafic et le nombre de backlinks sont des estimations ponctuelles de fournisseurs : aucun intervalle d’échantillonnage n’est calculé ni sous-entendu. Chaque partie indique sa source et sa date de référence.
Score AEO
Formule. round( (35 x mention + 25 x citation + 25 x part de voix + 15 x position) / 100 ), chaque partie sur 0-100, parties mesurées uniquement
- Taux de mention (poids 35). Part des réponses qui mentionnent la marque, 50 % vaut 100. La première chose dont un acheteur a besoin ; toutes les autres composantes en dépendent.
- Taux de citation (poids 25). Part des réponses qui citent le site de la marque, 40 % vaut 100. L’étape mesurable entre visibilité et trafic.
- Part de voix (cadre top 10) (poids 25). Part de la marque parmi les dix fournisseurs les plus mentionnés, 25 % vaut 100. Comment la marque se compare aux fournisseurs mentionnés à ses côtés.
- Position moyenne quand la marque est mentionnée (poids 15). 100 x (20 - place) / 19, la 1re place vaut 100. Une place plus haute est lue en premier ; c’est la composante qui pèse le moins, car elle repose sur le moins de réponses.
Données manquantes. Moins de 10 réponses : données insuffisantes, pas de score. La part de voix exige 10 mentions de fournisseurs et la position 5 réponses mentionnant la marque avec une place ; sinon, la partie concernée est écartée et le reste renormalisé.
Incertitude. Les réponses sont échantillonnées : le score est donc affiché avec une fourchette à 95 % tirée des intervalles de Wilson de ses taux (Monte-Carlo, graine fixe, dépendance prudente), ainsi que le score selon cinq pondérations alternatives, pour que l’effet des poids soit visible.
Quelle est la précision du classifieur de mentions de marque ?
Précision, rappel et exactitude du classifieur qui décide si une réponse mentionne votre marque, par moteur, mesurés par rapport à des annotations humaines. Chaque annotation renvoie à une vraie réponse capturée, et le verdict actuel du classifieur est recalculé au moment du rapport.
Chaque verdict est vérifié par rapport à des réponses annotées par des humains, moteur par moteur. Un chiffre n’est publié ici qu’une fois que son jeu annoté atteint le minimum requis, pour que chaque nombre repose sur assez de preuves.
La précision et le rappel sont mesurés par rapport à des jeux de référence (gold) étiquetés par des humains, stratifiés par moteur, sujet et marque. Chaque étiquette renvoie à une réponse réelle capturée ; le verdict ACTUEL du classifieur est réassocié au moment du rapport, de sorte qu’un changement de modèle ou de prompt est pris en compte sans réétiquetage. Les chiffres sous le nombre minimal d’étiquettes ne sont pas publiés.
Ces chiffres sont régénérés à partir de la dernière exécution étiquetée avant chaque déploiement.
Quelles sont les limites de cette méthode ?
- Les étiquettes silver servent à amorcer l’accord, mais ne constituent pas une vérité vérifiée par des humains ; seuls les chiffres des jeux de référence de cette page le sont.
- Le sentiment est un chiffre d’accord sur 3 classes, et non une précision/un rappel par classe.
- Les moteurs sont échantillonnés avec les versions de modèle indiquées ; un changement de modèle silencieux chez un fournisseur peut faire bouger les chiffres avant que la prochaine exécution de calibration ne l’enregistre.
- Le délai avant citation n’est mesuré que sur des pages contrôlées par Proofsource (sondes à jeton unique), et non sur n’importe quelle page client.
Les questions fréquentes sur la façon dont Proofsource mesure
Comment Proofsource mesure-t-il la visibilité IA ?
Il pose à ChatGPT, Perplexity, Claude et Google AI Overviews les questions de vos acheteurs, lit chaque réponse et enregistre si votre marque est mentionnée, à côté de qui, et quelles pages sont citées. Le taux de mention est la part des réponses qui vous mentionnent, et chaque taux est assorti d’un intervalle de Wilson à 95 %.
À quelle fréquence pose-t-on les questions ?
À la fréquence choisie par l’offre : quotidienne ou hebdomadaire, une fois par question et par moteur à chaque exécution. L’essai gratuit réalise 2 analyses, aujourd’hui et demain, avec 25 questions sur chaque moteur.
Pourquoi un intervalle sur chaque chiffre ?
Parce que la même question peut obtenir une réponse différente une minute plus tard. Un taux de mention calculé sur 20 réponses peut être loin du taux réel ; l’intervalle montre à quel point. Proofsource ne signale un changement que lorsqu’il dépasse l’intervalle, pour qu’une journée bruitée ne soit pas présentée comme une tendance.
Quelle est la précision du classifieur de mentions de marque ?
Sa précision et son rappel sont mesurés par rapport à des réponses étiquetées par des humains, moteur par moteur, et publiés sur cette page dès que le jeu étiqueté sera assez grand pour être honnête. D’ici là, les chiffres sont retenus plutôt qu’estimés.
Puis-je vérifier les réponses derrière un chiffre ?
Oui. Chaque chiffre s’ouvre sur les réponses à partir desquelles il a été calculé, avec le texte complet et les sources citées par chaque moteur, pour que vous puissiez le recompter vous-même.
Voyez vos propres chiffres, avec leurs intervalles.
Voyez quelles questions d’achat nomment votre marque, qui est nommé à votre place et quoi corriger. 200 réponses. 25 Prompts/question. Les meilleurs moteurs d’IA. 2 jours. Gratuit. Sans carte bancaire.