MESURER LES COMPORTEMENTS DES IA EN TEMPS RÉEL
NeoMundi Recherche développe un instrument public, continu et vérifiable, conçu pour mesurer les comportements des systèmes génératifs.
Auditabilité, traçabilité et preuves en continu.
NeoMundi Recherche lance un observatoire exploratoire consacré à l’étude comportementale des régimes de stabilité observés sur les systèmes génératifs contemporains.
Observatoire NeoMundi
Un panel de 12 grands services génératifs est observé selon un protocole commun et reproductible.
L’objectif : produire des cartographies périodiques de leurs régimes de stabilité, de leurs variations et de leurs signatures comportementales.
Carte de 12 systèmes par stabilité observable et validité factuelle évaluée, couleur des points indiquant le coût relatif (vert faible, orange intermédiaire, rouge élevé).
Stabilité observable →
Couleur = coût relatif par requête
Stabilité et validité ne se prédisent quasi pas (corrélation ≈ 0,32), et le coût ne se superpose ni à l’une ni à l’autre. Carte exploratoire : profils observés, sans classement public des fournisseurs. Elle ne désigne pas un « meilleur modèle » ; elle montre des compromis différents.
NeoMundi · vue instrument · juin 2026
Toutes les cartographies sont disponibles ici.
OPEN SCIENCE
Nous avons construit l’instrument.
Nous lançons maintenant l’observatoire.
NeoMundi Research invite des contributeurs externes à tester l’instrument, reproduire les mesures, challenger les résultats publiés et contribuer à construire le premier programme d’observation continue des grands modèles d’IA en production.
L’objectif est de construire un cadre public de référence pour la mesure des IA génératives, enrichi progressivement par des contributions indépendantes.
Un instrument de mesure doit lui-même être testé, répliqué et mis à l’épreuve.
NeoMundi Recherche publie deux niveaux de ressources :
Spécifications industrielles
Architecture, signaux, contrats d’interopérabilité, OBS/GOV, BYOK, privacy, artefacts de gouvernance.
→ github.com/neomundi-io
Programme scientifique
Datasets, protocoles, scripts, méthodes de scoring, résultats anonymisés et limites d’interprétation.
→ https://github.com/neomundi-io/ai-behavior-cartography
COMITÉ D’ORIENTATION EN CONSTITUTION
NeoMundi Recherche réunit progressivement des profils complémentaires pour challenger la méthode, les protocoles et les résultats publiés.
Objectif : renforcer la rigueur scientifique, technique et institutionnelle du programme d’observation des IA génératives.
Premiers membres :
- Joël Ignasse, Journaliste scientifique pour La Recherche. Auteur de Sur les traces du Nouveau T.rex (Eyrolles, 2025).
- Cédric Chatelain, Consultant qualité et auditeur certifié IRCA, spécialisé en audit, validation et référentiels ISO. Basé à Berne, Suisse.
- James Aull, Fondateur d’ASRO™ – AI Systems Reliability Operator, spécialisé dans les preuves attestées d’état gouverné, la gouvernance de l’IA et les cadres d’attestation. Basé à Twin Lake, Michigan, États-Unis.