Avec la popularité croissante des émissions de youtuber et de jeux, qui rivaliser le nombre d'utilisateurs avec les plates-formes de paiement telles que Netflix et HBO, une nouvelle opportunité d’étude est apparue dans le domaine de l’intelligence artificielle. Une machine capable de raconter des événements et des mécanismes serait-elle un jeu vidéo en temps réel?
Des chercheurs du Georgia Institute of Technology et de l’Université de l’Alberta ont conçu un système d’IA capable de générer des commentaires à partir d’une vidéo Let’s Play, dédié à retransmettre le chemin d'un jeu et à commenter ses attributs. "Il s'agit d'un domaine relativement inexploré pour l'IA expérimentale dans les jeux", ont déclaré les responsables de l'étude.
"Il y a plusieurs raisons pour lesquelles Let’s Play peut intéresser les chercheurs de Game AI", expliquent-ils. "Tout d'abord, une partie des commentaires de Let’s Play est consacrée à Il est pertinent pour la génération de didacticiels de jeu, de commentaires de jeu et d'IA explicable dans les jeux en général.. Deuxièmement, Let’s Plays se concentre sur la présentation de commentaires intéressants. Par conséquent, si nous pouvons reproduire les commentaires de Let’s Play, nous pouvons étendre ce travail pour améliorer le dialogue des PNJ et les invites du système. Enfin, ce sont des artefacts culturels importants, car ils constituent le principal moyen d'impliquer beaucoup de gens dans les jeux vidéo ».
L'expérience s'est déroulée en prenant trois des vidéos les plus populaires de Minecraft et leurs transcriptions respectives. Chaque vidéo a été divisée par images et sa phrase correspondante a été affectée pour être ensuite convertie en vecteurs. pour votre représentation mathématique. Malgré leur manque de connaissance contextuelle de l'environnement et leurs erreurs de cohérence, les chercheurs ont déterminé qu'il dépassait la performance moyenne attendue dans trois tests quantitatifs.
"Nous prévoyons que les développements futurs de ce travail seront plus étroitement liés à l'étude dans ces domaines", ont écrit les chercheurs. "Généraliser d'autres types de jeux présenterait un défi unique, puisque le contexte et les commentaires dépendent beaucoup des règles et de la conception d’un jeu particulier. Cependant, nous espérons étendre ce projet à d’autres jeux populaires pour Let’s Plays en résumant les détails de niveau inférieur et en nous concentrant sur des thèmes de niveau supérieur partagés dans tous les jeux. ”