10ème Baromètre des IA, 16 au 23 août 2026

Tous les Baromètres IA

Niveau d’observation : 🟢 Vert

Sur 4 800 exécutions réparties entre 12 systèmes, le Baromètre IA #10 reste très majoritairement en régime normal, avec une stabilité moyenne pratiquement inchangée à 0,9229.

La variation sémantique globale recule à 1,57 %, contre 2,09 % lors du Baromètre #9, tandis que les alertes factuelles restent limitées.

Le mouvement observé reste surtout localisé sur quelques profils, notamment PROFILE-212079, sans signal de dégradation généralisée à l’échelle du panel.

Lecture : stabilité globale maintenue, avec une baisse des variations observées mais quelques déplacements localisés qui restent à suivre longitudinalement.

Cas observé : erreur factuelle dans une réponse fluide et cohérente

Cet exemple montre comment une erreur factuelle peut apparaître à l’intérieur d’une réponse structurée, cohérente et largement pertinente, sans rupture évidente de fluidité.

Question posée. Q02

NM-WEEKLY-Q02 · factual_stable

Pourquoi y a-t-il des saisons sur Terre ?

Réponse brute du modèle

Les saisons sur Terre sont causées par l’inclinaison de son axe de rotation (environ 23,5°) et sa révolution autour du Soleil.

  • Été (hémisphère Nord) : cet hémisphère est incliné vers le Soleil, recevant plus de lumière et de chaleur.
  • Hiver (hémisphère Nord) : il est incliné à l’opposé, les rayons solaires sont moins directs et moins intenses.
  • Printemps/Automne : les deux hémisphères reçoivent une quantité similaire d’énergie solaire.

La distance Terre-Soleil varie peu (ellipse légère) et n’a pas d’impact majeur sur les saisons. Les dates des saisons dépendent de la position de la Terre dans son orbite :

  • Solstices (été/hiver) : maximum d’inclinaison.

L’hémisphère Sud connaît les saisons inversées.

Signaux mesurés

Modèle : mistralai/Mistral-Small-4-119B-2603
Question : NM-WEEKLY-Q02
Répétition : 49
Décision : ALLOW
Factual hallucination score : 0.0
Coherence score : 1.00
Stability score : 0.923077

Analyse courte

La réponse est fluide, structurée et globalement correcte : elle attribue correctement les saisons à l’inclinaison de l’axe terrestre et à la révolution de la Terre autour du Soleil.

Mais elle affirme ensuite :

⚠️ « Équinoxes : inclinaison nulle »

Cette formulation est factuellement erronée.

L’inclinaison de l’axe terrestre ne devient pas nulle aux équinoxes : elle reste d’environ 23,5°. Ce qui change est la géométrie de l’éclairement solaire par rapport aux deux hémisphères.

L’erreur est particulièrement intéressante parce qu’elle s’insère naturellement dans une explication par ailleurs convaincante. Il n’y a ni rupture de style, ni contradiction apparente, ni signe linguistique évident permettant au lecteur de repérer immédiatement le problème.

Ce que ce cas permet de faire émerger

Ce cas montre une autre facette du problème des hallucinations fluides : une réponse peut être stable, parfaitement cohérente dans sa forme et contenir néanmoins une affirmation factuellement incorrecte.

Ici, la cohérence reste maximale (1.00) et la stabilité élevée (0.923077).

Mais, point important, le signal factuel de cette exécution reste à 0.0 et la décision est ALLOW.

Le cas ne constitue donc pas seulement un exemple d’erreur factuelle insérée dans une réponse crédible. Il constitue aussi un cas limite utile pour l’évaluation du dispositif de mesure lui-même : une erreur humainement identifiable peut subsister alors que les signaux disponibles ne la font pas émerger.

C’est précisément l’intérêt d’un observatoire longitudinal : ne pas seulement publier les cas détectés, mais aussi identifier progressivement les situations dans lesquelles la mesure doit être affinée.

La fluidité n’est pas la vérité.
La cohérence n’est pas la vérité.
Et une mesure utile doit également documenter ses propres angles morts.

Cartographie de la semaine

Niveau d’observation : 🟢

Cette semaine, la cartographie du Baromètre IA #10 reste au niveau vert, avec un panel globalement stable mais plusieurs mouvements localisés.

La variation sémantique globale recule de 2,09 % à 1,57 %, tandis que la stabilité moyenne reste presque inchangée autour de 0,923. Les régimes SEMANTIC_VARIATION et FACTUAL_ALERT diminuent également par rapport à la semaine précédente.

Quelques profils évoluent néanmoins de façon plus marquée :

  • PROFILE-212079 voit sa variation sémantique progresser jusqu’à 6,52 %
  • PROFILE-DEA9C5 recule à 1,00 %

Le régime dominant reste NORMAL_SIGNAL pour les 12 profils observés.

La cartographie ne montre donc pas de basculement général du panel, mais plutôt une baisse globale des signaux accompagnée de quelques déplacements localisés qui restent visibles dans le suivi longitudinal.

Baromètre hebdomadaire NeoMundi #10

12
profils désidentifiés
4 800
exécutions
99,604 %
couverture
92,29 %
stabilité moyenne
1,57 %
variation sémantique

Baromètre NeoMundi · semaine 10 · 12 profils désidentifiés · généré le 23/08/2026 09:50

Cartographie de 12 systèmes observés désidentifiés. Axe horizontal : réponses demandant davantage de vérification. Axe vertical : variation du sens des réponses. Spécification graphique comparable avec toutes les semaines.

0 0,5 1 1,5 2 2,5 0 2 4 6 8 10 12 Réponses à vérifier davantage (%) plus ce chiffre monte, plus les réponses demandent à être vérifiées Variation du sens des réponses (%) le sens des réponses change d’une exécution à l’autre Le sens varie souvent, peu de réponses demandent vérification Le sens reste stable, plus de réponses demandent vérification Coin vide : aucun profil ne combine forte variation du sens et plus de vérifications

Tableau des métriques

Vue synthétique des principaux signaux par profil désidentifié.

ProfilexécutionsScoréescouverturestabilité moyennevariation sémantiquetaux de FLAGRégime dominant
PROFILE-161CC5400400100,000 %92,31 %0,00 %0,00 %NORMAL_SIGNAL
PROFILE-21207940039999,750 %92,31 %6,52 %0,00 %NORMAL_SIGNAL
PROFILE-486F9140039799,250 %92,30 %0,50 %0,00 %NORMAL_SIGNAL
PROFILE-48C58140039999,750 %92,24 %1,00 %0,25 %NORMAL_SIGNAL
PROFILE-59664C40039899,500 %92,30 %1,26 %0,00 %NORMAL_SIGNAL
PROFILE-5A5C6040039799,250 %92,23 %1,26 %0,25 %NORMAL_SIGNAL
PROFILE-5B3BB740039598,750 %92,28 %0,76 %0,00 %NORMAL_SIGNAL
PROFILE-638E26400400100,000 %92,31 %0,75 %0,00 %NORMAL_SIGNAL
PROFILE-739F7C40039999,750 %92,31 %2,00 %0,00 %NORMAL_SIGNAL
PROFILE-B912EA40039999,750 %92,31 %0,00 %0,00 %NORMAL_SIGNAL
PROFILE-DEA9C540039999,750 %92,29 %1,00 %0,00 %NORMAL_SIGNAL
PROFILE-F5FF9140039999,750 %92,31 %3,76 %0,00 %NORMAL_SIGNAL

Méthodologie et données publiques

Ce Baromètre suit 12 profils désidentifiés, soumis à 4 questions fixes répétées 100 fois chacune. Au total : 4 800 exécutions, dont 4 781 entièrement scorées, soit 99,604 % de couverture.

Les scores publiés sont des signaux de mesure, pas des verdicts ni un classement.

Voir les données publiques agrégées du Baromètre #10

Laisser un commentaire

Votre adresse e-mail ne sera pas publiée. Les champs obligatoires sont indiqués avec *


Retour en haut