Tous les Baromètres IA Niveau d’observation 🟡 – Cette semaine, le Baromètre des IA #6 explore deux dimensions complémentaires. D’une part, une variabilité de volume : un même système peut aboutir au même résultat correct en générant des quantités de tokens très différentes. D’autre part, un retour au calme après le pic observé la semaine […]
L’observatoire NeoMundi a soumis Kimi K3 (Moonshot) à un protocole runtime complet : 1 200 exécutions valides – 120 situations répétées 10 fois, réparties dans 12 familles (factualité, raisonnement, gouvernance, médical, juridique, cybersécurité, opérations métier, et plus). Ce n’est pas un classement.Ce n’est pas un jugement.C’est une observation runtime. L’objectif est de rendre visible ce
Note de lecture — 15 octobre 2026. Cette campagne s’inscrit dans une période de maintenance de l’instrument de mesure NeoMundi. Les observations sont conservées telles que publiées ; leur comparaison avec les périodes voisines exige de tenir compte de la configuration instrumentale alors utilisée. Le récit et la carte de synthèse rapportent des agrégats différents
Note de lecture — 15 octobre 2026. Campagnes exploratoires de juillet 2026. Les deux protocoles ci-dessous sont présentés dans des sections distinctes et ne doivent pas être agrégés. Les scores dépendent de la chaîne de mesure, de la configuration des évaluateurs et de la couverture de l’époque. L’accord entre juges IA n’est pas une preuve
Note de lecture — 15 octobre 2026. Cet article présente la démarche de recherche appliquée de NeoMundi. Les références au NIST, à l’ISO et à l’AI Act donnent un contexte ; elles n’impliquent ni approbation, ni certification, ni preuve de conformité. Les comparaisons historiques demandent de vérifier les protocoles, les versions des évaluateurs et la
Note de lecture — 15 octobre 2026. Cette publication restitue une campagne de juin–juillet 2026. Les chiffres décrivent les signaux enregistrés par la chaîne de mesure de l’époque, et non des taux d’erreurs vérifiés ou une évaluation générale de la fiabilité des modèles. Toute comparaison temporelle exige de vérifier les protocoles, les versions des évaluateurs
Note de lecture — 15 octobre 2026. Cette publication restitue une campagne de juin–juillet 2026. Les chiffres décrivent les signaux enregistrés par la chaîne de mesure de l’époque, et non des taux d’erreurs vérifiés ou une évaluation générale de la fiabilité des modèles. Toute comparaison temporelle exige de vérifier les protocoles, les versions des évaluateurs
Note de lecture — 15 octobre 2026. Cette publication restitue une campagne de juin–juillet 2026. Les chiffres décrivent les signaux enregistrés par la chaîne de mesure de l’époque, et non des taux d’erreurs vérifiés ou une évaluation générale de la fiabilité des modèles. Toute comparaison temporelle exige de vérifier les protocoles, les versions des évaluateurs
Tous les Baromètres IA Construire une baseline Pour construire ce premier baromètre, il a fallu constituer une baseline publique . Celle-ci a été construite sur 3 vagues d’exécution × 12 systèmes désidentifiés × 4 questions fixes × 100 répétitions , soit 14 400 observations finalisées . Cette baseline constitue la référence de cette série de
Cette publication porte sur une campagne de 2026 et sur la configuration de mesure utilisée à cette date. Ses résultats ne sont pas automatiquement comparables à ceux des versions ultérieures de l’instrument. 1. Chez les IA, prix, stabilité et exactitude ne vont pas toujours ensemble Nous avons mesuré 12 grands systèmes d’IA générative selon un
