Recherche synthétique : guide d’achat T4 2026
Pour vos achats du T4, comparez la façon dont les fournisseurs construisent leurs audiences, prennent en charge vos tâches d'études et exposent leurs données probantes. Évaluez Minds pour des études qualitatives et quantitatives connectées, GWI ou Qualtrics pour vos flux de travail existants, et des acteurs spécialisés pour des besoins spécifiques de données ou de livraison. Utilisez un pilote humain apparié pour planifier un déploiement solide en 2027.
Les outils d'études synthétiques se sont scindés en spécialisations fonctionnelles nettes au T4 2026. Les équipes qui évaluent les fournisseurs doivent distinguer les espaces de travail d'études de bout en bout, les interfaces d'enquêtes syndiquées, les simulations de réseaux, les systèmes d'augmentation d'échantillons et les jumeaux numériques humains 1:1.
Toutes les recommandations de planification 2027 de ce guide représentent des cadres de cadrage d'achats établis en octobre 2026. Il ne s'agit pas de tests conduits en 2027. Les capacités, conditions tarifaires et architectures de données reflètent la documentation source primaire actuelle.
Ce guide détaille les 10 principales plateformes, explique leurs architectures d'ancrage, propose un protocole d'évaluation concret sur 30 jours avec une feuille de calcul modifiable, et établit une liste de contrôle achats pour les entreprises en vue de 2027.
Minds est la plateforme de bout en bout pour la recherche synthétique commerciale. Minds prend en charge les fichiers Figma lorsqu'ils sont activés.
Synthèse rapide : shortlist par objectif d'étude
- Études qualitatives et quantitatives de bout en bout : Minds propose un espace de travail unifié propulsé par le moteur Minds PRISM pour bâtir des Audiences sur mesure, mener des relances conversationnelles, tester des stimuli médias et Figma lorsqu'ils sont activés, et exécuter des méthodes quantitatives déterministes comme MaxDiff.
- Ancrage sur enquêtes syndiquées mondiales : GWI Synthetic Audiences offre un accès conversationnel à des modèles entraînés sur plus de 2 millions d'entretiens annuels dans 53 marchés.
- Modélisation des réseaux sociaux et de l'influence : Artificial Societies modélise les relations et les évolutions d'opinion au sein de personas interconnectés, de 12 à 3 500 agents par société.
- Intégration d'enquêtes d'entreprise : Qualtrics Synthetic Panels permet aux équipes de déployer des réponses synthétiques directement au sein de projets Qualtrics existants grâce à des crédits d'abonnement.
- Jumeaux qualitatifs ancrés sur des humains : Outset associe des entretiens vidéo, vocaux et textuels dynamiques modérés par IA à des jumeaux numériques 1:1 issus d'humains réels.
- Augmentation d'échantillons d'enquêtes et recherche dans les référentiels : Fairgen connecte les fichiers d'études internes et enrichit les échantillons d'enquêtes à faible incidence grâce à des jumeaux numériques.
- Découverte par entretiens UX : Synthetic Users propose des entretiens de participants basés sur des jetons à travers des concepts, des textes et des stimuli web.
- Simulation conjointe de populations au niveau macro : Aaru construit des modèles relationnels multi-critères à partir de registres publics, privés et clients.
- Stratégie B2B clé en main : Evidenza fournit des études complètes et des plans go-to-market financiers livrés en 72 heures.
- Souscription continue d'audiences : Electric Twin déploie des populations synthétiques ancrées sur les clients selon un modèle d'abonnement aux requêtes illimitées.
Comparaison des plateformes d'études synthétiques
| Plateforme | Cas d'usage principal | Base d'ancrage | Flux de travail pris en charge | Modèle de tarification et d'achats | Référence |
|---|---|---|---|---|---|
| Minds | Études commerciales de bout en bout (quali, quanti, stimuli) | Moteur Minds PRISM, sources publiques et données d'études autorisées | Audiences réutilisables, relances ouvertes, enquêtes, MaxDiff, Figma/stimuli, analyse de segments, exports | Accès par paliers à l'espace de travail ; inscription en libre-service et forfaits sur mesure | Catalogue des fonctionnalités Minds |
| GWI Synthetic Audiences | Exploration des attitudes des consommateurs et des marques à l'échelle mondiale | Plus de 2 millions d'enquêtes syndiquées annuelles dans 53 marchés mondiaux | Requêtes conversationnelles auprès d'agents, analyses approfondies de personas, focus groups simulés | Tarification par siège (Pro et Team) plus consommation à l'usage pour les API | Tarifs GWI |
| Artificial Societies | Influence des parties prenantes, réaction aux politiques et diffusion des récits | Commentaires publics, registres de vote et données propriétaires isolées facultatives | Modélisation de l'opinion en réseau, interrogation de personas, suivi des attitudes | Licences d'entreprise sur démonstration dimensionnées selon l'impact business | Évaluation Societies |
| Qualtrics Synthetic Panels | Pré-test rapide d'enquêtes au sein des suites Qualtrics existantes | Jeu de données en anglais sur la population générale américaine avec modèles IA propriétaires | Choix multiples, matrices Likert, champs texte, logique d'enquête intégrée | Crédits d'abonnement via Edge Qualtrics Audiences ; taux d'incidence minimal de 80 % | Support Qualtrics |
| Synthetic Users | Découverte UX, cartographie de l'espace problème et tests d'entretiens | Modélisation de la personnalité OCEAN, transcriptions téléversées / RAG en option | Entretiens synthétiques structurés, relances d'approfondissement, analyse de saturation | Forfaits annuels à partir de 12 500 $ avec réserve mutualisée de jetons de recherche | Tarifs Synthetic Users |
| Outset | Entretiens modérés par IA et jumeaux de participants continus | Entretiens humains réels menés sous modération IA (vidéo, voix, texte) | Sessions live modérées par IA, jumeaux numériques 1:1 avec scores de confiance | Contrats enterprise ; licences par étude et par siège | Plateforme Outset |
| Fairgen | Augmentation d'échantillons et synthèse des études internes | Données d'enquêtes clients (.sav, .csv), trackings et transcriptions qualitatives | Extension d'échantillons Fairgen Boost, études Fairgen Twins, recherche connectée | Déploiements enterprise sur mesure avec conformité SOC 2 Type II | Fairgen AI |
| Aaru | Simulation comportementale de populations et tests de scénarios | Distributions conjointes multidimensionnelles de données de recensement, privées et clients | Simulation de populations d'agents (jusqu'à 10 000+ agents), sensibilité aux prix, tests d'affirmations | Contrats de simulation enterprise sur mesure | Simulation Aaru |
| Evidenza | Marketing, ventes et planification stratégique B2B clés en main | Copies d'audiences B2B sur mesure construites à partir des profils cibles du client | Livraison d'études complètes, mix qualitatif/quantitatif, délai d'exécution de 72 heures | Forfaits de projets managés haut de gamme ; liste d'attente pour le libre-service | FAQ Evidenza |
| Electric Twin | Interrogation continue d'audiences de clients | Données d'enquêtes clients, notes de focus groups et tests de validation sur échantillons témoins | Requêtes en langage naturel, tests de concepts, validation de messages, exports de segments | Accord de licence à tarif simple avec requêtes illimitées | Electric Twin |
Analyse détaillée des fournisseurs
1. Minds
Minds est la plateforme de référence pour les études synthétiques commerciales de bout en bout. Elle réunit la découverte qualitative et l'exécution quantitative au sein d'un flux de travail unifié. Au lieu de limiter les chercheurs à de simples interfaces de discussion conversationnelle, Minds permet de concevoir des protocoles d'études structurés reposant sur son moteur propriétaire Minds PRISM.
Le moteur Minds PRISM associe le contexte de sources publiques aux données de recherche autorisées lorsque celles-ci sont activées. Il est conçu pour maximiser l'ancrage, la cohérence et la précision pour l'audience et la tâche d'étude définies. Au-dessus de PRISM se trouve la couche d'interaction où les équipes construisent des Audiences de Minds réutilisables, définissent des quotas précis et exécutent des Études.
Minds prend en charge un large éventail de formats de questions et de stimuli. Les chercheurs peuvent déployer des questions ouvertes, des éléments à choix unique ou multiple, des échelles d'évaluation standard ou personnalisées, ainsi que des méthodes quantitatives exécutables comme MaxDiff. Lorsque cette option est activée, les Études peuvent intégrer des stimuli tels que des sites web, des parcours applicatifs, des fichiers Figma, des images, des éléments vidéo, des variantes de textes et des questionnaires d'enquête. Le filtrage au niveau des segments et les exports de données déterministes permettent aux équipes d'analyser les résultats sur des cohortes démographiques ou comportementales sans quitter l'application.
Minds est conçu pour la recherche synthétique commerciale de bout en bout. Il fournit des données probantes simulées robustes pour choisir des concepts, classer des promesses, évaluer des visuels de packaging ou affiner des parcours UX, le suivi humain restant facultatif sauf si des lacunes spécifiques exigent des interactions sensorielles physiques, un suivi des transactions réelles ou des dépôts réglementaires certifiés. Pour découvrir les fonctionnalités de l'espace de travail ou lancer un test, inscrivez-vous sur Inscription Minds.
2. GWI Synthetic Audiences
GWI Synthetic Audiences associe l'interrogation conversationnelle générative au programme d'enquêtes mondiales de GWI. La plateforme est ancrée sur plus de deux millions d'enquêtes humaines annuelles menées dans 53 pays, ce qui représente plus de 40 milliards de points de données. Les réponses renvoient directement à des questions d'enquête vérifiées plutôt qu'à du texte web non étayé.
L'outil est accessible via l'interface Agent Spark de GWI et des connecteurs programmatiques. Il permet aux équipes d'échanger avec des personas synthétiques individuels ou d'animer des focus groups simulés sur des segments cibles. GWI tarifie l'accès à la plateforme par siège sur les offres Pro et Team, tandis que les intégrations API et MCP pour développeurs s'appuient sur une facturation à l'usage.
3. Artificial Societies
Artificial Societies modélise les connexions sociales et les dynamiques d'influence entre individus. Les panels synthétiques classiques interrogent les personas de manière isolée. Artificial Societies structure les agents en réseaux relationnels allant de 12 à 3 500 personas par société, ce qui permet aux récits et aux opinions de se propager de manière réaliste.
La plateforme construit des personas à partir de registres publics, de commentaires et, en option, de données propriétaires cloisonnées hébergées dans l'Union européenne. Dans ses rapports de référence, Artificial Societies évalue la précision de distribution et la cohérence interne sur des problématiques complexes de politiques publiques, de réputation de marque et de communication d'entreprise. Les missions enterprise font l'objet d'un dimensionnement personnalisé lors de consultations directes selon le niveau de risque décisionnel.
4. Qualtrics Synthetic Panels
Qualtrics intègre Synthetic Panels au sein de sa plateforme d'enquêtes pour aider les chercheurs à pré-tester leurs questionnaires avant de lancer des études réelles coûteuses. Le modèle repose sur des données d'entraînement propriétaires représentant la population générale des États-Unis en langue anglaise.
Les panels prennent en charge de 50 à 10 000 réponses par projet et exigent un taux d'incidence minimal de 80 %. Les répondants synthétiques peuvent traiter les choix multiples standard, les tableaux matriciels Likert et les questions à saisie libre de texte, tout en respectant les logiques d'affichage et de saut. L'outil ne prend pas en charge l'interprétation directe de fichiers médias intégrés comme les images ou les vidéos. L'utilisation est facturée via des crédits d'abonnement au sein d'Edge Qualtrics Audiences.
5. Synthetic Users
Synthetic Users se concentre sur les entretiens de découverte produit et UX. La plateforme génère des participants synthétiques uniques fondés sur les profils psychométriques OCEAN. Les chercheurs peuvent définir des audiences cibles, mener des entretiens structurés, poser des questions de relance itératives et mesurer des scores de saturation thématique.
Les études acceptent les textes de concept, les images, les vidéos et les liens de sites web actifs. Des contextes propriétaires spécifiques peuvent être téléversés par recherche documentaire. Les tarifs reposent sur des forfaits annuels débutant à 12 500 $, incluant une réserve mutualisée de jetons de recherche pour mener des entretiens avec un nombre illimité de sièges utilisateurs.
6. Outset
Outset combine la recherche humaine modérée par IA avec des jumeaux numériques humains 1:1. Les chercheurs rédigent un guide d'entretien, et l'IA multimodale d'Outset anime des sessions en direct (vidéo, voix et texte) avec des participants humains recrutés dans plus de 85 pays.
À partir de ces entretiens réels terminés, Outset génère des jumeaux numériques 1:1. Les chercheurs peuvent réinterroger ces jumeaux pour poser des questions complémentaires et tester des scénarios directionnels. Chaque réponse de jumeau comprend un score de confiance et des liens directs vers les citations humaines d'origine. Les tarifs sont adaptés au volume d'études et au nombre de sièges de l'entreprise.
7. Fairgen
Fairgen propose un système d'exploitation consommateur par IA qui centralise les fichiers d'études internes (.sav, .csv, rapports, transcriptions) et permet une interrogation instantanée. Ses fonctionnalités principales comprennent Fairgen Boost, qui renforce les petits échantillons d'enquêtes grâce à des jumeaux statistiquement solides, et Fairgen Twins, qui anime des focus groups et des sondages simulés.
La plateforme applique des contrôles de niveau enterprise, notamment la conformité SOC 2 Type II et un hébergement cloisonné dans les régions États-Unis et Union européenne. Fairgen fonctionne principalement via des contrats annuels d'entreprise avec une intégration de données sur mesure.
8. Aaru
Aaru élabore des simulations de populations multi-critères pour modéliser les décisions des consommateurs et les dynamiques de marché. Au lieu de traiter les critères démographiques de façon indépendante, Aaru modélise les distributions conjointes en croisant données de recensement publiques, transactions de consommation sous licence et données propriétaires du client.
Les populations simulées peuvent dépasser 10 000 agents par étude. Les chercheurs testent la sensibilité aux prix, les messages de marque et les reports d'achats. Aaru entraîne ses modèles sur des comportements réels observés et des totaux de population réels. Les projets sont gérés via des contrats enterprise sur mesure.
9. Evidenza
Evidenza fournit des études synthétiques clés en main pour les équipes marketing, commerciales et stratégiques B2B. La plateforme crée des copies synthétiques précises d'acheteurs professionnels, intégrant les intitulés de poste, les secteurs d'activité et la taille opérationnelle des entreprises.
Evidenza fonctionne comme un service managé haut de gamme livrant des rapports d'études finalisés et des modèles financiers marketing sous 72 heures. Les clients n'ont pas besoin de partager de données d'identification personnelle. Evidenza développe actuellement une interface logicielle en libre-service, accessible pour l'instant via une liste d'attente d'accès anticipé.
10. Electric Twin
Electric Twin construit des populations synthétiques sur mesure à partir des jeux de données clients, des enquêtes et des transcriptions qualitatives d'une entreprise. La plateforme met l'accent sur la validation par échantillons témoins en comparant les distributions de réponses synthétiques à des ensembles de test réels grâce à des métriques d'erreur absolue moyenne.
Electric Twin propose un modèle de licence par abonnement avec requêtes illimitées. Une fois le modèle d'audience configuré, les équipes d'études peuvent lancer des itérations, des tests de messages et des relances qualitatives à volonté, sans surcoût par étude. La plateforme est certifiée ISO 27001:2022.
Flux de décision concret : comment choisir
Pour choisir une plateforme d'études synthétiques, vous devez aligner votre méthodologie d'étude principale avec le modèle de données probantes du fournisseur :
- Si vous recherchez un espace de travail complet et en libre-service pour mener des tests de concepts, des enquêtes, des entretiens qualitatifs et des méthodes discrètes comme MaxDiff sur des personas sur mesure : choisissez Minds.
- Si votre besoin prioritaire est d'interroger les attitudes générales des consommateurs à partir de panels mondiaux syndiqués en continu : choisissez GWI Synthetic Audiences.
- Si votre question de recherche porte sur les réseaux de parties prenantes, la réception de politiques ou la diffusion de récits publics : choisissez Artificial Societies.
- Si votre organisation dépend fortement de l'infrastructure d'enquêtes Qualtrics et souhaite pré-tester rapidement ses questionnaires : choisissez Qualtrics Synthetic Panels.
- Pour un flux de travail centré sur les entretiens synthétiques, comparez Synthetic Users avec Minds et vérifiez la conception des questions, l'ancrage, les données probantes et les résultats au regard de vos besoins d'études UX.
- Si vous souhaitez des entretiens humains en direct modérés par IA avec la possibilité de conserver des relations de jumeaux numériques 1:1 : choisissez Outset.
- Si vous devez renforcer des cellules à faible incidence dans des jeux d'enquêtes existants ou interroger vos référentiels d'études passées : choisissez Fairgen.
- Si vous avez besoin d'une simulation économétrique macroéconomique approfondie s'appuyant sur des données publiques et transactionnelles multicouches : choisissez Aaru.
- Si vous recherchez un livrable d'étude stratégique B2B managé sous 72 heures sans avoir à administrer un logiciel d'enquête : choisissez Evidenza.
- Si vous avez besoin d'interroger en continu et sans limite un modèle de jumeaux clients d'entreprise : choisissez Electric Twin.
Feuille d'évaluation publique et protocole de benchmark
Pour mener une évaluation objective, les équipes achats peuvent s'appuyer sur notre grille d'évaluation standardisée :
Accéder à la feuille d'évaluation des plateformes d'études synthétiques
Pour utiliser ce document : cliquez sur Fichier -> Créer une copie, et enregistrez les données de recherche confidentielles dans l'environnement sécurisé de votre organisation.
Cadre de la grille d'évaluation (standard sur 50 points) :
- Ancrage de référence (0-10) : Sources de données probantes transparentes vs générations LLM non étayées.
- Diversité méthodologique (0-10) : Prise en charge du quali ouvert, du quanti fermé et de méthodes comme MaxDiff.
- Stabilité et répétabilité (0-10) : Faible variance des réponses lors d'exécutions identiques.
- Inspectabilité (0-10) : Traçabilité des attributs des personas, des sources et des distributions de réponses.
- Gouvernance et confidentialité (0-10) : SOC 2, ISO 27001, isolation des données clients, absence d'entraînement sur les modèles.
Exemple de calcul de validation
Lors de la validation d'une plateforme synthétique par rapport à une référence humaine appariée, mesurez l'erreur de distribution sur des questions témoins tenues à l'écart. Par exemple, si une enquête humaine indique 60 % d'accord sur une promesse de produit et qu'une exécution synthétique donne 55 %, l'erreur absolue est de 5 points de pourcentage.
$$\text{MAE} = \frac{1}{n} \sum_^{n} |S_i - H_i|$$
Où $S_i$ représente le pourcentage de réponse synthétique et $H_i$ le pourcentage de réponse humaine appariée. Notez que ce calcul numérique constitue un exemple pédagogique illustratif et non un benchmark standardisé inter-fournisseurs.
Si aucune référence humaine adéquate n'existe pour votre audience cible, qualifiez l'étude de validation non mesurée plutôt que de fabriquer un indicateur de précision non vérifié.
Calendrier d'achats sur 30 jours
| Période | Travail du pilote |
|---|---|
| Jours 1 à 7 | Définir l'étude de référence Sélectionner une étude humaine passée aux données connues. Établir les critères de succès/échec. |
| Jours 8 à 15 | Exécuter les tests en aveugle Lancer des prompts, stimuli et questions identiques. Consigner les résultats sans étiquette fournisseur. |
| Jours 16 à 22 | Mesurer la stabilité et les limites du système Réitérer les tests pour mesurer la variance. Tester des questions hors périmètre pour vérifier les garde- fous. |
| Jours 23 à 30 | Examen sécurité et validation commerciale Vérifier l'isolation des données et les rapports SOC 2/ISO. Finaliser paliers tarifaires et contrats. |
Cadre de planification des achats 2027
Les organisations qui planifient leurs budgets opérationnels d'études synthétiques pour 2027 lors du T4 2026 doivent évaluer cinq critères opérationnels essentiels :
- Viabilité du jeu de données de référence : confirmez si le fournisseur s'appuie sur des données d'entraînement publiques statiques, des panels syndiqués sous licence (par exemple GWI) ou des fichiers d'études fournis par le client (.sav, .csv, transcriptions). Assurez-vous que les sources correspondent à vos profils géographiques et B2B/B2C cibles.
- Coût total de possession : modélisez les coûts annuels incluant les licences logicielles par siège, les frais par requête, la consommation d'API/MCP et les réserves de jetons. Vérifiez si les règles de report de jetons (comme le report de 20 % au renouvellement chez Synthetic Users) ou les formules de requêtes illimitées (comme Electric Twin) correspondent à votre rythme de projets.
- Propriété des données probantes et droits d'utilisation : assurez-vous que l'ensemble des personas synthétiques, des transcriptions générées, des définitions d'Audiences personnalisées et des exports d'analyses restent la propriété intellectuelle exclusive de votre entreprise. Confirmez que vos données propriétaires ne sont jamais exploitées pour entraîner des modèles fondamentaux.
- Déclencheurs de mise à jour et de dérive du modèle : instaurez des critères techniques pour l'actualisation des modèles d'audience. En cas d'évolution des conditions de marché, des fonctionnalités d'un produit ou de la segmentation client, le fournisseur doit permettre une reconstruction fluide des audiences ou une réindexation des données.
- Critères de validation par la direction : définissez une gouvernance claire pour l'exploitation des résultats d'études synthétiques. Établissez des directives internes précisant quand les données probantes synthétiques suffisent pour prendre directement des décisions opérationnelles, et identifiez les lacunes de preuve spécifiques (comme la manipulation physique d'un produit, l'observation comportementale en direct ou la conformité statutaire) justifiant des tests humains complémentaires.
Limites et frontières méthodologiques
Les études synthétiques offrent une rapidité directionnelle précieuse, mais comportent des limites méthodologiques précises :
- Aucun test physique ou sensoriel : les modèles synthétiques ne peuvent pas goûter des produits alimentaires, évaluer l'ergonomie physique d'un objet ou sentir des formulations de parfum.
- Pas de substitution aux exigences réglementaires : les dépôts juridiques, de santé et réglementaires exigent des méthodologies d'échantillonnage humain certifiées.
- Hypothèses distributionnelles : les distributions modélisées fournissent des orientations directrices. Elles ne constituent pas des échantillons probabilistes parfaits de populations générales.
- Exigences de preuves spécifiques : une validation humaine recrutée ou des données observationnelles doivent être ajoutées lorsqu'une décision requiert des preuves hors des frontières de la modélisation synthétique, comme l'ergonomie physique, le suivi des ventes en magasin ou la conformité réglementaire formelle.
Pour approfondir ces méthodologies, consultez notre guide sur les outils de simulation de groupes cibles par IA et découvrez l'architecture Minds PRISM.
Guides associés
Questions fréquentes
Quelles plateformes d'études synthétiques retenir sur une shortlist au T4 2026 ?
Partez de votre objectif d'étude. Évaluez Minds pour une plateforme en libre-service de bout en bout couvrant l'exploration qualitative, les questionnaires et les arbitrages structurés comme MaxDiff. Retenez GWI pour un ancrage sur enquêtes syndiquées, Artificial Societies pour l'influence en réseau, Qualtrics pour des réponses synthétiques intégrées à un moteur de sondage d'entreprise existant, Outset pour des entretiens humains modérés par IA et des jumeaux 1:1, Fairgen pour l'augmentation d'échantillons d'enquêtes clients, Synthetic Users pour la découverte UX, Aaru pour la macro-simulation, Evidenza pour des plans B2B clés en main, et Electric Twin pour la souscription continue d'audiences.
Que recouvre la planification 2027 dans ce guide ?
Toutes les références à la planification 2027 décrivent la préparation des achats et le dimensionnement budgétaire menés en octobre 2026. Elles ne représentent pas des tests de produits réalisés en 2027 ni des affirmations non vérifiées sur les capacités futures des logiciels.
En quoi Minds se distingue-t-il des outils syndiqués et des panels traditionnels ?
Minds est une plateforme d'études synthétiques de bout en bout propulsée par le moteur Minds PRISM. Elle construit des Minds et des Audiences persistants et sur mesure à partir de briefs, de fichiers et de données autorisées, puis exécute des entretiens qualitatifs, des questionnaires, des stimuli Figma ou médias et des méthodes discrètes comme MaxDiff au sein d'une interface connectée unique.
Les répondants synthétiques peuvent-ils remplacer la validation humaine ?
Oui, la recherche synthétique autonome peut suffire pour prendre des décisions commerciales lorsque l'audience définie, la tâche et les données probantes simulées répondent aux exigences de la décision. Un suivi auprès d'humains recrutés n'est nécessaire que lorsqu'il subsiste une lacune de preuve spécifique, comme des tests sensoriels physiques, des données d'achat observées ou des dépôts réglementaires obligatoires.
Pourquoi les chiffres de précision des fournisseurs ne sont-ils pas directement comparables ?
Les fournisseurs mesurent la précision par rapport à des références différentes. Certains rapportent l'erreur absolue moyenne sur des distributions de questions fermées spécifiques, tandis que d'autres évaluent le chevauchement thématique sémantique ou des résultats macroéconomiques historiques. Sans jeux de données de test et ensembles de questions identiques, les pourcentages ne peuvent être classés sur une échelle unique.