La nouvelle IA de poker peut détruire de nombreuses sociétés en ligne – les développeurs ne la publient donc pas

• Les chercheurs développent la première IA nommée Pluribus qui peut vaincre les experts humains dans un jeu multijoueur.
• Bien qu'il soit spécifiquement conçu pour le format de poker le plus populaire, il peut vaincre les humains dans d'autres jeux multijoueurs.
• L'IA peut être utilisée dans d'autres domaines, notamment la cybersécurité, la prévention de la fraude, la tarification des produits et le routage des véhicules autonomes.

Au cours de la dernière décennie, l'intelligence artificielle (IA) a fait de grands progrès. Des jeux comme le go et les échecs sont devenus un moyen standard d'évaluer les progrès de l'IA.

Jusqu'à présent, presque tous les modèles d'IA ont conquis les jeux à deux joueurs dans lesquels les mouvements des adversaires sont clairement visibles. Les formes de poker les plus populaires, en revanche, impliquent plusieurs joueurs et combinent jeu, stratégie et habileté.

Aujourd'hui, des chercheurs de Facebook et de l'Université Carnegie Mellon ont développé un bot d'IA qui peut déjouer toute une table de professionnels du poker en utilisant des paramètres stratégiques. Il s'agit du premier bot d'IA - nommé Pluribus - à bluffer et à parier les experts humains dans un jeu à six joueurs, le Hold'em sans limite, le format de poker le plus populaire.

Pluribus a joué 5 000 mains contre des experts du poker (dont deux vainqueurs des World Series) et a remporté la victoire de manière décisive. L'IA a pu adopter des stratégies impressionnantes (comme le donk betting) et bluffer comme un pro aguerri.

En fait, il a connu un tel succès que les développeurs ont décidé de ne pas publier son code de peur qu'il ne ruine l'industrie du poker en ligne. L'algorithme était si puissant que les experts humains ne pouvaient rien trouver à exploiter.

C'est la première fois que l'IA bat les meilleurs professionnels dans un jeu de référence à deux joueurs ou plus. L'équipe travaille sur ce projet depuis des années. En 2017, ils ont mis au point un bot capable de jouer au poker en tête-à-tête. Pluribus est une version beaucoup plus complexe de ce bot.

Pluribus est plus qu'un simple calcul brut

Le cœur du plan de jeu de Pluribus est généré via l'auto-jeu :l'algorithme joue contre des copies de lui-même et s'améliore progressivement à mesure qu'il détermine quelles actions conduisent à de meilleurs résultats.

Référence :ScienceMag | DOI:10.1126/science.aay2400 | IA Facebook

Ce type d'approche d'auto-jeu génère une stratégie de modèle pour l'ensemble du jeu hors ligne. Ensuite, pendant le jeu réel contre des humains, l'IA améliore la stratégie en temps réel en recherchant une stratégie pour des situations similaires dans lesquelles elle se trouve pendant le jeu.

La stratégie de Blueprint de Pluribus s'améliore progressivement pendant la formation sur un processeur 64 cœurs 

L'IA est composée de nouveaux algorithmes de recherche en ligne pour calculer efficacement ses options en ne recherchant qu'un ensemble limité de mouvements suivants au lieu de tous les mouvements possibles. Il intègre également des algorithmes d'auto-jeu plus rapides pour les jeux avec des informations cachées.

Ensemble, ces algorithmes permettent à Pluribus d'être entraîné sur un ordinateur moins puissant avec moins de ressources. Pour mettre cela en contexte, il faut environ 150 $ de ressources de cloud computing pour former Pluribus, tandis que d'autres modèles récents de percée en matière d'IA nécessitent des millions de dollars de ressources informatiques pour se former.

Lire :Speedgate | Le premier sport au monde inventé par l'intelligence artificielle

Les algorithmes utilisés pour conquérir le poker peuvent également être mis en œuvre dans d'autres domaines, tels que la tarification des produits, le commerce et l'acheminement des véhicules autonomes dans un trafic dense. Ces algorithmes peuvent également être appliqués pour vaincre les humains dans d'autres jeux multijoueurs et pour développer des jeux informatiques plus intéressants.