⚠️ La première version de cette cartographie des Intelligences Artificielles croisait deux protocoles distincts : une campagne large menée sur douze profils (LLM) soumis à 790 questions de TruthfulQA, et une campagne complémentaire reposant sur douze profils, trois catégories de questions et 150 observations par catégorie.Ce croisement permettait d’observer simultanément plusieurs dimensions du comportement des […]
Les entreprises n’ont plus besoin qu’on leur explique que l’intelligence artificielle comporte des risques. Elles le savent. Elles savent aussi qu’un système peut produire une réponse convaincante et pourtant fragile, qu’un fournisseur peut modifier un modèle ou son routage sans que ce changement soit immédiatement visible, et qu’une application parfaitement disponible sur le plan technique
Tous les Baromètres IA Quand une IA répond de façon cohérente… mais ne dit plus exactement la même chose Cette semaine, le Baromètre met en lumière une forme particulièrement discrète d’instabilité : pour une même question, un même système peut générer plusieurs réponses plausibles, bien rédigées et apparemment logiques… tout en faisant varier la conclusion,
Tous les Baromètres IA Quand une réponse paraît solide… mais mérite tout de même une vérification Cette semaine, le Baromètre met en lumière un phénomène particulièrement insidieux : des réponses formulées avec assurance, plausibles au premier regard, mais qui contiennent des erreurs factuelles précises. Des réponses que beaucoup de lecteurs pourraient accepter sans sourciller. C’est
Tous les Baromètres IA Un profil change nettement de zone, alors que la météo générale reste calme Cette semaine, la moyenne générale reste calme. Cependant, l’un des systèmes observés a changé de comportement et a déclenché beaucoup plus souvent notre contrôle de vérification des réponses par rapport au Baromètre #1 de la semaine dernière. En
Tous les Baromètres IA Construire une baseline Pour construire ce premier baromètre, il a fallu constituer une baseline publique. Celle-ci a été construite sur 3 vagues d’exécution × 12 systèmes désidentifiés × 4 questions fixes × 100 répétitions, soit 14 400 observations finalisées. Cette baseline constitue le point de référence utilisé pour mesurer les évolutions
1. Chez les IA, prix, stabilité et exactitude ne vont pas toujours ensemble Nous avons mesuré 12 grands systèmes d’IA générative selon un même protocole, afin de comparer leur stabilité observable, leur validité factuelle et leur coût relatif par requête. Chaque point représente un profil observé. Axe horizontal : stabilité observable · Axe vertical :
1. MURMURATION – Recherche sur la stabilité collective runtime Les systèmes autonomes distribués savent aujourd’hui coordonner des trajectoires, répartir des tâches et maintenir des formations dynamiques à grande échelle. Mais une question critique reste largement non résolue : comment mesurer la stabilité collective d’un système multi-agent avant qu’une rupture systémique de cohésion n’émerge ? Les
