Un profil change nettement de zone, alors que la météo générale reste calme
Cette semaine, la moyenne générale reste calme. Cependant, l’un des systèmes observés a changé de comportement et a déclenché beaucoup plus souvent notre contrôle de vérification des réponses par rapport au Baromètre #1 de la semaine dernière.
En effet, le LLM anonymisé avec l’identifiant de profil DEA9C5 (voir graphique ci-dessous) a attiré notre attention par un changement notable : le pourcentage de réponses « à vérifier davantage » est passé de manière significative de 0,3 % la semaine dernière à 12,3 % cette semaine, soit un multiple de 41.
NB : Dans cette campagne, les réponses sont relues par un second modèle d’IA chargé de repérer des affirmations potentiellement fragiles sur les faits. Son signal sert à attirer l’attention ; il ne remplace ni une vérification humaine, ni une preuve qu’une réponse est fausse.
C’est l’observation la plus marquante relevée par ce baromètre hebdomadaire des IA. Elle valide l’intérêt d’un suivi dans le temps : une IA peut sembler fonctionner normalement dans l’ensemble, tout en évoluant de façon importante sur certains types de réponses.
C’est ce que nous appelons un changement de régime silencieux : le comportement d’un système évolue sans annonce préalable, sans que l’utilisateur le voie forcément, et sans qu’aucune alerte visible ne l’annonce.
Cela ne signifie pas que le système est devenu mauvais, ni que toutes ces réponses sont fausses, mais montre simplement qu’il ne réagit plus exactement comme la semaine précédente.
Or, pour une organisation qui utilise l’IA pour informer, assister des équipes, orienter une décision ou répondre à des clients, il est crucial de pouvoir détecter un changement de comportement avant qu’il ne produise des conséquences.
C’est pourquoi chaque semaine, NeoMundi pose les mêmes questions aux mêmes systèmes. Cela permet de repérer ce qui change réellement, au lieu de se contenter d’une photographie ponctuelle.
Vous pouvez consulter librement toutes les données publiques agrégées et désidentifiées de ce 2ème Baromètre NeoMundi sur notre répertoire GitHub.
La prochaine observation permettra de déterminer si ce changement disparaît, se stabilise ou se confirme.
Baromètre NeoMundi · semaine 2 · 12 profils désidentifiés · généré le 29/06/2026 14:33
Cette cartographie est générée à partir des données publiques agrégées par un script Python reproductible, disponible ici : voir le générateur de cartographie.
Méthodologie et données publiques
Ce baromètre suit 12 profils désidentifiés avec 4 questions fixes répétées chacune 100 fois. Au total : 4 800 exécutions, dont 4 773 scorées avec succès (99,44 % de couverture).
Les scores sont des signaux de mesure, pas des verdicts ni un classement.
→ Voir les données publiques agrégées du Baromètre #2
→ Voir la baseline publique NeoMundi
→ Voir la méthodologie de l’Observatoire