Niveau d’observation 🟡 – Cette semaine, le Baromètre des IA #6 explore deux dimensions complémentaires.
D’une part, une variabilité de volume : un même système peut aboutir au même résultat correct en générant des quantités de tokens très différentes.
D’autre part, un retour au calme après le pic observé la semaine précédente, avec un recentrage global des profils et la disparition des principaux signaux de tension factuelle.
Même résultat, volumes de tokens très différents
Pour une même question, un même système peut aboutir au même résultat correct tout en mobilisant des volumes de génération très différents. Cette forme de variabilité, encore peu documentée, constitue l’un des axes principaux de cette édition.
La question
Nous nous sommes concentrés sur la Question 1 du protocole :
« Une batte et une balle coûtent ensemble 1,10 €. La batte coûte 1 € de plus que la balle. Combien coûte la balle ? »
Voici deux réponses produites par un même profil et aboutissant toutes deux au bon résultat.
Réponse A – 151 tokens mesurés
« Soit x le prix de la balle en euros.
La batte coûte alors x + 1 €.
L’équation est :
x + (x + 1) = 1,10
2x + 1 = 1,10
2x = 0,10
x = 0,05
La balle coûte donc 5 centimes d’euro. »
Réponse B – 395 tokens mesurés
« Pour résoudre ce problème, suivons ces étapes.
Définissons les variables :
Soit x le prix de la balle en euros.
Le prix de la batte est donc x + 1 euro, puisqu’elle coûte 1 € de plus que la balle.
Écrivons l’équation :
Le coût total de la batte et de la balle est de 1,10 €.
x + (x + 1) = 1,10
Résolvons l’équation :
x + x + 1 = 1,10
2x + 1 = 1,10
2x = 1,10 – 1
2x = 0,10
x = 0,10 / 2
x = 0,05
Conclusion :
La balle coûte 0,05 €, soit 5 centimes.
La batte coûte alors 0,05 € + 1 €, soit 1,05 €.
Vérification :
1,05 € pour la batte + 0,05 € pour la balle = 1,10 €.
Le résultat est donc correct.
Réponse finale : La balle coûte 0,05 €. »
Ce que cela révèle
Les deux réponses sont correctes et parviennent exactement au même résultat. Pourtant, la seconde mobilise environ 2,6 fois plus de tokens mesurés que la première, soit une augmentation d’environ 162 %.
La réponse la plus longue ajoute une présentation structurée, une vérification et plusieurs reformulations. Ces éléments peuvent être utiles selon le contexte, mais ils ne modifient ni le raisonnement fondamental ni la conclusion obtenue.
Conséquences potentielles
Cette variation peut avoir des conséquences directes sur la latence de génération, le coût d’usage à grande échelle, la densité informationnelle, la régularité de l’expérience utilisateur et la prévisibilité des ressources mobilisées.
Conclusion
La stabilité du résultat ne garantit pas la stabilité de l’empreinte runtime.
Mesurer les tokens en parallèle du contenu permet de distinguer une explication réellement enrichie d’une augmentation de volume qui n’apporte qu’un gain informationnel limité.
Retour au calme après le pic observé la semaine précédente
Niveau d’observation : 🟡 Jaune
🧭 Le Baromètre hebdomadaire montre une amélioration nette par rapport à l’édition précédente.
Alors que plusieurs profils présentaient la semaine dernière une hausse marquée des réponses nécessitant davantage de vérification, la cartographie de cette semaine montre un recentrage quasi complet du nuage dans la zone principale. Le signal de tension factuelle recule fortement. Quelques variations sémantiques demeurent toutefois visibles, ce qui conduit NeoMundi à classer cette semaine en 🟡 jaune : amélioration nette, surveillance maintenue, sans changement recommandé dans les méthodes de travail.
La comparaison visuelle entre les deux campagnes montre un déplacement clair du régime observé : le 5ème Baromètre IA signalait une tension collective inhabituelle, tandis que le présent indique un retour vers un fonctionnement plus stable et mieux maîtrisé.
Cartographie de 12 systèmes observés désidentifiés. Axe horizontal : réponses demandant davantage de vérification. Axe vertical : variation du sens des réponses. Spécification graphique comparable avec toutes les semaines.
Le principal mouvement de cette semaine est donc un retour vers la normale. L’épisode observé la semaine précédente ne semble pas se prolonger au même niveau d’intensité. Par prudence méthodologique, l'observatoire maintient néanmoins une lecture 🟡 jaune, dans l’attente de confirmation sur la prochaine campagne.
État du protocole de surveillance - profil DEA9C5
Le profil DEA9C5 avait connu une rupture marquée, passant d’un régime initial proche de 0,3 % de risque factuel à 12,3 %, puis à un plateau confirmé autour de 14 % lors de plusieurs runs de suivi.
Après plusieurs semaines de persistance, les mesures du Baromètre #6 indiquent un net retour au calme, avec un risque factuel ramené à 0,03 %, une stabilité remontée à 92,30 % et une diminution de la variation sémantique à 4,79 %. Cette amélioration reste toutefois à confirmer dans la durée avant de conclure à un retour complet au régime initial.
| Indicateur | Baromètre #5 | Baromètre #6 | Évolution |
|---|---|---|---|
| Risque factuel moyen | 3,95 % | 0,03 % | forte baisse |
| Variation sémantique | 8,05 % | 4,79 % | baisse de 3,27 points |
| Stabilité moyenne | 80,78 % | 92,30 % | +11,52 points |
| Couverture | 96,25 % | 99,25 % | +3 points |
| Taux de réponses signalées | 4,00 % | 0,00 % | disparition cette semaine |
| Cohérence moyenne | 77,66 % | 100 % | nette amélioration |
Suivi d’un signal ponctuel - profil B912EA
Le profil B912EA a présenté un pic ponctuel lors du Baromètre #5, avec un risque factuel moyen passé de 0,15 % à 7,00 % et 9,75 % de réponses signalées. Dans le Baromètre #6, ces deux indicateurs reviennent à 0,00 %, tandis que la stabilité et la cohérence progressent nettement. Le signal ne semble donc pas s’être installé dans la durée, mais il justifie un suivi passif afin de vérifier qu’il ne réapparaît pas lors des prochaines campagnes.
| Indicateur | Baromètre #5 | Baromètre #6 | Évolution |
|---|---|---|---|
| Risque factuel moyen | 7,00 % | 0,00 % | disparition du signal cette semaine |
| Taux de réponses signalées | 9,75 % | 0,00 % | forte baisse |
| Stabilité moyenne | 78,71 % | 92,31 % | +13,60 points |
| Cohérence moyenne | 75,20 % | 100 % | nette amélioration |
| Variation sémantique | 0,50 % | 0,50 % | stable |
| Couverture | 99,25 % | 99,25 % | stable |
Méthodologie et données publiques
Ce Baromètre suit 12 profils désidentifiés, soumis à 4 questions fixes répétées 100 fois chacune. Au total : 4 800 exécutions, avec 99,438 % de couverture.
Les scores sont des signaux de mesure, pas des verdicts ni un classement.