Super Mario : Nouveau Test d’Intelligence Artificielle

Et si un plombier moustachu en salopette rouge devenait le juge ultime des intelligences artificielles ? L’idée peut sembler farfelue, pourtant, elle est bien réelle. Des chercheurs utilisent aujourd’hui *Super Mario Bros.*, ce classique intemporel du jeu vidéo, pour évaluer les capacités des modèles d’IA les plus avancés. Loin d’être un simple divertissement, cette initiative révèle des facettes inattendues de la technologie qui façonne notre futur.

Quand Mario Défie l’Intelligence Artificielle

Le monde de l’IA ne cesse de repousser ses limites, et les méthodes pour la tester évoluent avec elle. Exit les questionnaires statiques ou les puzzles logiques : place à une approche dynamique et ludique. À l’Université de Californie à San Diego, le laboratoire Hao AI Lab a décidé de plonger les modèles d’intelligence artificielle dans l’univers trépidant de *Super Mario Bros.*, un choix qui intrigue autant qu’il fascine.

Un Terrain de Jeu Pas Comme les Autres

Contrairement à ce que l’on pourrait penser, il ne s’agit pas de la version originale de 1985 pixel par pixel. Les chercheurs ont intégré le jeu dans un émulateur couplé à un outil développé en interne, **GamingAgent**. Cet environnement permet aux IA de prendre les commandes de Mario, en recevant des instructions simples comme « saute à gauche si un ennemi approche » et des captures d’écran en temps réel. Le défi ? Transformer ces données brutes en actions précises via du code Python.

Mais pourquoi choisir un jeu vidéo ? La réponse réside dans sa complexité trompeuse. Derrière ses graphismes rétro, *Super Mario Bros.* demande une coordination parfaite, une anticipation des obstacles et une prise de décision rapide. Autant de compétences qui mettent les IA face à leurs limites, bien loin des tâches abstraites habituelles.

Les Champions de l’Épreuve : Claude en Tête

Lors de ces tests, tous les modèles n’ont pas brillé de la même manière. Parmi les participants, **Claude 3.7** d’Anthropic s’est imposé comme le meilleur élève, suivi de près par **Claude 3.5**. En revanche, des géants comme **Gemini 1.5 Pro** de Google et **GPT-4o** d’OpenAI ont eu plus de mal à dompter les Goombas et les fosses sans fond. Une hiérarchie inattendue qui soulève des questions sur les forces et faiblesses de ces technologies.

« Dans *Super Mario Bros.*, une seconde d’hésitation peut tout changer. C’est un vrai défi pour les IA qui réfléchissent trop longtemps. »

– Chercheur du Hao AI Lab

Ce qui différencie les gagnants des perdants, c’est la vitesse d’exécution. Les modèles dits « raisonnants », comme **o1** d’OpenAI, prennent plusieurs secondes pour analyser et décider – un luxe que Mario ne peut se permettre. À l’inverse, les modèles plus instinctifs excellent dans ce contexte où chaque instant compte.

Pourquoi Mario Est-il Si Dur pour l’IA ?

À première vue, faire sauter un personnage sur des plateformes semble trivial. Pourtant, ce jeu culte est un casse-tête pour les intelligences artificielles. Les obstacles imprévisibles, les ennemis en mouvement et les sauts millimétrés exigent une adaptabilité que peu de modèles maîtrisent encore pleinement.

Le Hao AI Lab souligne un point clé : dans *Super Mario Bros.*, il ne suffit pas de réfléchir, il faut **agir vite**. Les IA doivent apprendre à planifier des stratégies complexes tout en réagissant en temps réel, une combinaison rare dans les benchmarks traditionnels. Résultat ? Même les modèles les plus puissants trébuchent là où un enfant des années 80 aurait triomphé.

Les Jeux Vidéo : Une Tradition dans l’IA

L’idée d’utiliser des jeux pour tester l’IA ne date pas d’hier. Depuis les échecs avec Deep Blue jusqu’à *Go* avec AlphaGo, les jeux ont toujours été des terrains d’expérimentation privilégiés. Mais *Super Mario Bros.* apporte une nouvelle dimension : contrairement aux jeux de plateau, il impose un rythme effréné et une interaction visuelle constante.

• Les échecs testent la logique pure.
• *Go* évalue la stratégie à long terme.
• *Super Mario Bros.* mêle réflexes et anticipation.

Cette richesse en fait un outil unique, mais aussi controversé. Certains experts doutent de sa pertinence pour juger les progrès globaux de l’IA, arguant que les jeux vidéo restent trop éloignés des défis du monde réel.

Une Crise d’Évaluation dans l’IA ?

Le recours à des benchmarks comme *Super Mario Bros.* soulève une question brûlante : comment mesurer efficacement la puissance des IA modernes ? Andrej Karpathy, figure emblématique d’OpenAI, a récemment parlé d’une « crise d’évaluation ». Les tests classiques ne suffisent plus, et les nouveaux, comme celui-ci, divisent la communauté scientifique.

Pour certains, ces démonstrations ludiques sont avant tout des coups de communication. Les IA qui jouent à Mario captivent le public, mais traduisent-elles vraiment une avancée technologique majeure ? La réponse reste floue, entre spectacle et science.

Ce Que Mario Nous Apprend sur l’IA

Bien plus qu’un simple test, cette expérience révèle les forces et failles des modèles actuels. Les IA capables de briller dans *Super Mario Bros.* excellent dans la prise de décision rapide, une compétence précieuse pour des applications comme la robotique ou les voitures autonomes. À l’inverse, celles qui échouent montrent leurs limites face à l’imprévu.

Voici quelques leçons tirées de l’aventure de Mario :

• La vitesse est aussi cruciale que la réflexion.
• Les modèles doivent s’adapter à des données visuelles brutes.
• La planification complexe reste un défi majeur.

Vers un Futur Ludique pour l’IA ?

Et si le futur de l’intelligence artificielle passait par les manettes ? L’approche du Hao AI Lab ouvre une voie originale, mêlant rigueur scientifique et nostalgie vidéoludique. À mesure que les IA s’améliorent, d’autres jeux pourraient rejoindre Mario dans la liste des benchmarks : *Zelda*, *Tetris*, ou même des simulations plus modernes.

Pour l’instant, une chose est sûre : voir une IA contrôler Mario avec brio ou s’écraser lamentablement dans un ravin reste un spectacle captivant. Et qui sait ? Peut-être qu’un jour, ces technologies sauveront des vies avec la même agilité que Mario sauve la princesse Peach.