Une IA qui suit plusieurs joueurs dans Minecraft en même temps : c'est bluffant

Imaginez une IA capable de voir le monde d'un jeu vidéo à travers les yeux de plusieurs joueurs simultanément. Des chercheurs viennent de le réaliser. Et le résultat est époustouflant.

Le défi caché des IA dans les jeux

Jusqu'ici, les IA qui prédisent la suite d'une partie de jeu vidéo se limitent à un seul point de vue. Elles ont une vision étroite, comme un tunnel.

Dans la vie réelle, un geste simple comme lancer une balle change la vue de tous : celui qui lance, celui qui reçoit, les passants. Tout doit rester cohérent. C'est la "cohérence multi-agents". Pour une IA, c'est un vrai casse-tête.

Solaris : l'IA aux multiples regards

Une équipe a relevé le défi avec Solaris. Cette IA simule les perspectives de plusieurs joueurs dans Minecraft en même temps. Le rendu est presque magique.

Exemple concret : deux joueurs face à face. L'un pose un bloc. Solaris le fait apparaître correctement dans la vue des deux, avec l'angle différent de chacun, la lumière, les ombres et les objets qui masquent. Tout colle parfaitement.

Pourquoi Minecraft est idéal pour tester ça

Minecraft est parfait pour ce genre d'expérience. Voilà pourquoi :

Un monde 3D ultra-complexe. L'IA doit gérer les changements de perspective, les objets qui se cachent derrière d'autres, et raisonner dans l'espace.

Des modifications partout. Les joueurs construisent, cassent, bougent sans arrêt. L'IA suit tout depuis chaque angle.

De l'aléatoire constant. Monstres qui surgissent, météo qui varie, événements imprévus. Elle doit séparer les actions des joueurs des surprises du jeu.

Le truc génial : un système pour accumuler des masses de données

Pour entraîner une telle IA, il faut des tonnes de vidéos de parties multijoueurs synchronisées. Mais personne n'avait d'outil fiable pour ça.

Les chercheurs ont créé SolarisEngine. Des bots IA jouent ensemble : ils minent, bâtissent, combattent, explorent. Résultat : plus de 12 millions d'images de gameplay multi-perspectives. Des heures de vidéos cohérentes.

Le top ? Ça tourne non-stop, 24h/24, pour produire sans cesse de nouvelles données d'entraînement.

Comment ça marche en coulisses

Solaris repose sur un modèle de diffusion vidéo. L'IA part du bruit et affine image par image, en gardant le fil entre toutes les vues.

Ils ont ajouté "Checkpointed Self Forcing" : une astuce pour mémoriser les longues séquences sans bouffer toute la mémoire. L'IA retient l'essentiel sans tout stocker.

Pourquoi c'est important au-delà des jeux

"Cool, mais à quoi ça sert pour Minecraft ?" Bonne question. Les applications sont énormes.

Robots collaboratifs : Ils coordonnent leurs tâches en voyant le monde comme les autres.

Voitures autonomes : Elles anticipent comment leurs mouvements paraissent aux piétons ou autres véhicules.

Simulations d'entraînement : Pour pompiers, chirurgiens ou pilotes, des environnements virtuels ultra-réalistes.

La vision d'avenir

Ce qui m'emballe le plus ? Tout est open-source : le système de données, les modèles, les outils d'évaluation. Gratuit pour tous.

C'est un tournant. On passe des IA mono-vue à celles qui gèrent des mondes partagés par plusieurs agents.

Ça commence avec des blocs pixelisés. Mais les grandes révolutions IA démarrent toujours simplement. Solaris marque un jalon clé.

L'avenir, c'est des IA qui captent la réalité multi-perspectives comme nous. On s'en rapproche.

Source : https://arxiv.org/pdf/2602.22208