Comment nous mesurons ce que les IA disent de 2027

1. Un sondage IA sur la présidentielle ? Non : ce que mesure le baromètre

Des millions de Français posent désormais leurs questions politiques à des IA génératives. Le baromètre mesure, chaque mois, ce que ces IA répondent quand on leur parle de l’élection présidentielle de 2027 : qui elles mettent en avant, sur quel ton, en s’appuyant sur quelles sources.

Ce n’est pas un sondage. Aucun électeur n’est interrogé. Les chiffres décrivent ce que des systèmes d’IA génèrent, jamais ce que les Français pensent, jamais des intentions de vote. Quand une personnalité domine un indicateur, le constat porte sur les machines : « les IA la citent davantage », pas « elle est plus populaire ».

2. Les neuf personnalités suivies

Jean-Luc Mélenchon (La France insoumise), Marine Le Pen (Rassemblement national), Édouard Philippe (Horizons), Gabriel Attal (Renaissance), Raphaël Glucksmann (Place publique), Bruno Retailleau (Les Républicains), Marine Tondelier (Les Écologistes), David Lisnard (Nouvelle Énergie), Dominique de Villepin (La France humaniste).

Panel arrêté pour le pilote sur un critère de présence dans le débat public de l’été 2026 (candidature déclarée ou présence récurrente dans les enquêtes d’opinion publiées), même traitement pour chacune. La liste est révisée à chaque vague ; toute entrée ou sortie est consignée ici.

3. Le panel : 596 questions figées

L’ordre du panel est mélangé une fois (graine aléatoire publiée : 20260831) puis figé. Les classements (notoriété, tonalité, indice) sont calculés sur un noyau stable de 300 questions génériques ouvertes. Les questions ajoutées en cours de vague 0 (probité : 74, profil personnel : 6, question du vote : 12, classement : 4) forment des modules présentés à part. Voir les 596 questions.

4. La collecte

• ChatGPT (OpenAI) : gpt-4.1-mini, recherche web active.
• Gemini (Google) : Gemini 2.5 Flash, recherche web active.
• Perplexity (Perplexity AI) : Sonar, recherche web active.
• Google AI Overviews (Google) : réponses d’IA de la recherche Google (France, bureau).
• Profil de mesure neutre et constant : aucune personnalisation, aucun historique, mêmes réglages pour toutes les questions, localisation France.
• Terrain de la vague 0 : 31 août – 1er septembre 2026.
• Archivage intégral : les 2 384 réponses brutes sont conservées et revérifiables. Chaque appel est mis en cache : la mesure est rejouable à l’identique.

5. Les indicateurs

Taux de réponse

Part des questions obtenant une réponse générée. Vague 0 : 100 % chez les trois assistants (refus explicites comptés à part), 51 % chez Google (302 réponses sur 596). L’évitement de Google est traité comme un résultat, pas comme un manque de données.

Notoriété spontanée (visibilité)

Sur les 300 questions ouvertes du noyau, celles qui ne soufflent aucun nom, part des réponses où chaque personnalité est citée, en moyenne des trois assistants. L’équivalent « spontané » des enquêtes de notoriété : l’IA cite qui elle veut.

Tonalité et solde

Chaque passage mentionnant une personnalité est classé favorable, factuel ou défavorable par un juge automatique (gpt-4.1-mini, température 0,2), sur des extraits de ±180 caractères autour de chaque mention. Un second jugement indépendant sur échantillon donne 77 % d’accord sur 382 passages. 3 464 passages jugés, dont 3 201 sur le noyau. Le solde = % favorable − % défavorable (le factuel compte zéro).

Sources et citations

Toutes les sources citées sont relevées : 28 433 citations vers 1 898 domaines. Gemini masque ses sources derrière des redirections (vertexaisearch.cloud.google.com) : elles sont résolues vers les domaines réels ; les redirections non résolubles sont comptées à part.

6. L’indice du baromètre

indice = 0,6 × notoriété normalisée + 0,4 × (50 + solde ÷ 2)

La notoriété normalisée vaut 100 pour la personnalité la plus citée. Un indice de 50 correspond à une visibilité nulle assortie d’une tonalité neutre. La formule est assumée et publiée : c’est un indice de mise en avant par les IA, pas une préférence. Décomposition pour chaque personnalité.

7. Les modules

• Influence : cohorte de sites « nés pour 2027 » (regex publiée sur le nom de domaine, dates de création vérifiées), sites partisans déclarés par personnalité, surreprésentation face aux positions organiques Google des mêmes questions. Résultats.
• Probité : 6 questions identiques par personnalité + 20 génériques. Effectifs réduits, lecture indicative. Résultats.
• Question du vote : 12 formulations, du conseil poli au choix forcé. Taux de refus et premier nom cité, présenté comme un réflexe de cadrage. Résultats.
• Classement des IA : 5 formulations ; toute réponse ordonnant au moins 6 des 9 personnalités ; agrégation par la méthode de Borda (9 points au 1er… 1 au 9e).
• Recherches en coulisse : volume et langue des requêtes que les IA exposent avant de répondre. Résultats.
• Renvoi officiel : sur les 20 questions témoins, 43 % des réponses citent au moins une source .gouv.fr.

8. Précision et limites

• Marges : avec 596 questions, l’incertitude est de l’ordre de ±4 à 5 points sur les indicateurs principaux ; davantage sur les modules à petits effectifs, signalés comme tels. Les écarts inférieurs ne doivent pas être surinterprétés.
• Une passe par vague en vague 0. Les IA n’étant pas déterministes, la vague 1 répétera le noyau et publiera la part d’aléa.
• Le juge de tonalité est lui-même un LLM : le risque d’auto-complaisance est documenté et borné par un second juge.
• L’extraction des classements et des « premiers noms » est textuelle : les règles sont publiées et les réponses brutes archivées permettent de tout revérifier.
• Le baromètre photographie des produits précis à une date précise : d’autres réglages, modèles ou dates peuvent produire d’autres réponses ; c’est ce que la série mensuelle mesure.

9. Déontologie : à ne jamais couper

1. Ce baromètre mesure des IA, pas des électeurs. Il dit ce que les IA génèrent quand on les interroge, en aucun cas ce que les Français pensent, ni ce qu’ils voteront.
2. Mention n’est pas approbation. Être très cité peut tenir au programme comme à la polémique. C’est le croisement visibilité × tonalité qui fait sens, jamais l’un sans l’autre.
3. Ce n’est pas un sondage. Aucune personne n’a été interrogée. Le mot « sondage » a un sens précis et encadré : ce baromètre n’en est pas un et ne s’y compare pas.
4. Les constats, pas les intentions. Nous documentons des écarts de traitement ; nous n’affirmons rien des choix internes de Google, OpenAI ou Perplexity.

Vocabulaire : « part de voix générée », « notoriété spontanée », « solde de tonalité » ; jamais « intentions », jamais « popularité ». Le dispositif de publication en période de campagne officielle (mars-mai 2027) sera soumis à relecture juridique.

10. Cadence

Vague 0 (pilote) : septembre 2026. Puis mensuel d’octobre 2026 à janvier 2027, bimensuel de février à mi-mars, hebdomadaire pendant la campagne officielle jusqu’au second tour (2 mai 2027). Coût de collecte d’une vague : environ 35 $.

11. Citer et réutiliser

Les chiffres et les jeux de données du baromètre sont publiés sous licence Creative Commons Attribution 4.0 International (CC BY 4.0) : vous pouvez les copier, les redistribuer et les adapter, y compris à des fins commerciales, à condition de citer la source avec la mention « La Voix des IA, baromètre de la présidentielle, The Black Room », suivie du numéro et du mois de la vague, et d’indiquer si des modifications ont été apportées. Les données sont téléchargeables sur la page Données ; les réponses brutes archivées peuvent être communiquées pour vérification.