Méthodologie

1. Les modèles IA mesurés

Nous distinguons deux modes de collecte, indiqués à côté de chaque réponse :

• Capture réelle : la réponse affichée dans le produit grand public, collectée depuis la page du produit par un prestataire de collecte de données.
• Simulation par API : un appel au modèle du fournisseur, avec un outil de recherche web que le modèle décide d’utiliser ou non. Ce n’est pas le produit grand public (modèle, consignes et sources peuvent différer) ; ces modèles IA portent toujours la mention « API ».

La localisation suit la région de vos prompts. Pour la France, les deux modèles IA de Google sont interrogés depuis Paris ; l’AI Overview est en plus demandé en français (fr-FR) et dans sa version complète. ChatGPT est interrogé via une connexion française, sans compte ; par défaut, il décide lui-même s’il effectue une recherche web. L’API Gemini ne reçoit pas de localisation : c’est une limite de cette simulation.

2. Fréquence et échantillons

Les prompts sont interrogés environ toutes les 24 heures sur chaque modèle IA activé, dans la limite de votre offre. Les réponses des IA varient d’une exécution à l’autre : nous ne tirons jamais de conclusion d’une réponse isolée. Les indicateurs principaux (visibilité, part de voix) indiquent le nombre de prompts sur lesquels ils reposent et leur marge d’incertitude.

Dans nos rapports, un résultat par prompt et par modèle IA repose sur au moins 10 réponses ; en dessous, il est signalé comme « indicatif ». Un jour sans réponse (panne d’un fournisseur, par exemple) apparaît comme une absence de donnée, jamais comme un zéro.

3. Définitions des indicateurs

• Visibilité (par modèle IA) : part des réponses analysées qui mentionnent votre marque. Pour les AI Overviews de Google, elle est calculée uniquement sur les recherches où un aperçu s’est affiché ; le taux d’affichage de l’AI Overview (recherches avec AI Overview ÷ recherches) est publié à part.
• Visibilité globale : moyenne simple des modèles IA capturés (AI Overviews, ChatGPT, AI Mode) qui ont des réponses analysées sur la période. Les simulations par API sont présentées à part et n’entrent jamais dans ce chiffre. Elle porte sur les prompts « non marqués », qui ne contiennent pas le nom de votre marque ; les prompts qui la nomment sont analysés dans un bloc « Réputation ».
• Part de voix : mentions de votre marque ÷ (mentions de votre marque + mentions des concurrents que vous suivez). Chaque marque compte au plus une fois par réponse ; le calcul est cumulé par modèle IA puis moyenné. Elle n’est affichée que si vous suivez au moins un concurrent ; les autres marques citées vous sont proposées comme suggestions.
• Sentiment : tonalité des seules réponses qui mentionnent votre marque ; « — » quand aucune ne la mentionne.
• Classement : rang par taux de mention parmi les marques que vous suivez, calculé sur exactement les mêmes réponses pour toutes. Ce n’est pas une « position dans l’IA ».
• Évolutions : exprimées en points de pourcentage (voir § 4 pour leur mise en couleur).
• Sources : liens cités dans les réponses de la période, paramètres de suivi retirés. Le taux de citation d’un domaine est la part des réponses qui le citent.

4. Incertitude et significativité

Les réponses à un même prompt se ressemblent d’un jour à l’autre : un prompt suivi pendant 30 jours compte pour un seul prompt. Pour les indicateurs principaux du tableau de bord, l’intervalle de confiance à 95 % est donc calculé au niveau des prompts (rééchantillonnage des prompts, dit « bootstrap »). Une évolution n’y est mise en couleur que si les deux périodes portent exactement sur les mêmes couples prompt × modèle IA, s’il y a au moins 10 prompts, et si l’intervalle à 95 % de l’écart exclut zéro. En dessous de 50 prompts distincts, ces indicateurs sont signalés comme « exploratoires ».

Pour un prompt pris seul, sur un modèle IA, l’intervalle porte sur ses réponses (intervalle de Wilson). Les évolutions des sources utilisent une règle plus simple et sont à lire comme des tendances.

5. Analyse des réponses

Chaque réponse est lue par un modèle de langage hébergé sur Azure OpenAI, qui repère la mention de votre marque, les autres marques citées et la tonalité. Les noms des autres marques sont normalisés (majuscules, accents, formes juridiques) puis rapprochés des concurrents que vous suivez et de leurs alias. Les réponses brutes sont consultables depuis le détail de chaque prompt, avec leur date, leur modèle IA et sa version enregistrée.

6. Ce que l’IA a cherché

Avant de répondre, un assistant IA lance souvent plusieurs recherches web, formulées autrement que votre question (« query fan-out »). ChatGPT n’affiche pas ces recherches : nous les observons via l’API d’OpenAI, où la même famille de modèles rédige les recherches et où le moteur de recherche d’OpenAI les exécute. Elles sont proches, sans en être la copie, de ce que ChatGPT a cherché pour une réponse donnée, et nous les présentons comme telles.

• Chaque prompt est vérifié dès que vous le suivez (ou le reformulez), à nouveau deux semaines plus tard, puis toutes les deux semaines (chaque mois avec l’offre Starter), ou à chaque réponse si vous suivez l’API ChatGPT.
• Nous montrons chaque recherche, le nombre de relevés qui l’ont lancée, les mots que l’IA ajoute à votre question et les pages trouvées par ses recherches : les vôtres, celles de vos concurrents, les autres. Les pages appartiennent à un lot de recherches, jamais à une seule formulation.
• Google (AI Overviews, AI Mode, Gemini) n’est pas couvert : les conditions de son API ne nous permettent pas d’analyser ses recherches.

7. Limites à connaître

• Nous mesurons votre ensemble de prompts, dans les conditions décrites ci-dessus ; pas l’ensemble de l’audience française.
• Les réponses personnalisées (compte connecté, historique, mémoire) ne sont pas reproduites.
• Les simulations par API peuvent différer nettement des produits grand public : nous les présentons séparément.
• Modèles IA non couverts à ce jour : Perplexity, Microsoft Copilot, Mistral Le Chat et Meta AI.
• Les captures réelles dépendent d’un prestataire tiers et des pages publiques des produits, qui évoluent sans préavis.
• Les réponses brutes et leurs analyses sont conservées 90 jours (voir notre politique de confidentialité).

Une question sur une mesure ? Écrivez-nous à support@deepfirst.ai.