Le piège de la boîte noire
Le scénario soulevé par la Red Team du Ministère des Armées met en exergue un risque critique de la guerre moderne : la dépendance envers une IA monolithique dont le cheminement décisionnel est opaque. Dans un environnement de combat de haute intensité, une corruption de données, qu’elle soit logicielle, issue d’une guerre électronique ou d’un biais systémique, peut amener une IA à prendre une décision catastrophique sans qu’aucun opérateur humain ne puisse en comprendre la racine. En l’absence de traçabilité, le commandement se retrouve face à un vide explicatif inacceptable, tant sur le plan opérationnel que juridique.