Pluribus IA bat les pros du poker — Le silence de l'industrie inquiète

Des chercheurs développent la première IA nommée Pluribus qui peut vaincre des experts humains dans un jeu multijoueur. Bien qu'elle soit spécifiquement conçue pour le format de poker le plus populaire, elle peut battre les humains dans d'autres jeux multijoueurs. L'IA peut être utilisée dans d'autres domaines, y compris la cybersécurité, la prévention de la fraude, la tarification des produits et le routage des véhicules autonomes.

Au cours de la dernière décennie, il y a eu de grands progrès en intelligence artificielle (IA). Des jeux comme le Go et les Échecs sont devenus un moyen standard d'évaluer les progrès en IA.

Jusqu'à présent, presque tous les modèles d'IA ont conquis des jeux à deux joueurs où les coups des adversaires sont clairement visibles. Les formes les plus populaires de poker, en revanche, impliquent plusieurs joueurs et combinent jeu, stratégie et habileté.

Maintenant, des chercheurs de Facebook et de l'Université Carnegie Mellon ont développé un bot IA qui peut déjouer toute une table de professionnels du poker en utilisant des paramètres stratégiques. C'est le premier bot IA — nommé Pluribus — à surclasser les experts humains dans un jeu à six joueurs, sans limite Hold'em, le format le plus populaire de poker.

Pluribus a joué 5 000 mains contre des experts du poker (dont deux gagnants des World Series) et a gagné de manière décisive. L'IA a été capable d'adopter des stratégies impressionnantes (telles que le donk betting) et de bluffer comme un pro chevronné.

En fait, elle a eu tellement de succès que les développeurs ont décidé de ne pas publier son code de peur qu'il ne détruise l'industrie du poker en ligne. L'algorithme était si fort que les experts humains ne pouvaient trouver rien à exploiter.

C'est la première fois que l'IA a battu les meilleurs professionnels dans n'importe quel jeu de référence qui a deux joueurs ou plus. L'équipe travaille sur ce projet depuis des années. En 2017, ils ont créé un bot capable de jouer au poker en un-contre-un. Pluribus est une version beaucoup plus complexe de ce bot.

Pluribus est plus que du calcul brut

Le cœur du plan de jeu de Pluribus est généré via l'auto-jeu : l'algorithme joue contre des copies de lui-même et s'améliore progressivement en déterminant quelles actions mènent à de meilleurs résultats.

Référence : ScienceMag | DOI:10.1126/science.aay2400 | Facebook AI

Ce type d'approche d'auto-jeu génère une stratégie de blueprint pour tout le jeu hors ligne. Puis pendant le jeu réel contre les humains, l'IA améliore la stratégie en temps réel en recherchant une stratégie pour des situations similaires dans lesquelles elle se trouve pendant le jeu.

La stratégie blueprint de Pluribus s'améliore progressivement pendant l'entraînement sur un processeur 64 cœurs

L'IA est composée de nouveaux algorithmes de recherche en ligne pour calculer efficacement ses options en ne recherchant qu'un ensemble limité de coups suivants au lieu de tous les coups possibles. Elle incorpore également des algorithmes d'auto-jeu plus rapides pour les jeux à information cachée.

Ensemble, ces algorithmes permettent à Pluribus d'être entraîné sur un ordinateur moins puissant avec moins de ressources. Pour mettre cela en perspective, il faut environ 150 $ de ressources de cloud computing pour entraîner Pluribus, alors que d'autres modèles de percée IA récents nécessitent des millions de dollars de ressources informatiques pour s'entraîner.

Les algorithmes utilisés pour conquérir le poker peuvent être implémentés dans d'autres domaines également, tels que la tarification des produits, le trading, et le routage de véhicules autonomes dans le trafic dense. Ces algorithmes peuvent aussi être appliqués pour battre les humains dans d'autres jeux multijoueurs et pour développer des jeux informatiques plus intéressants.