ИИ, который видит за всеми игроками в Minecraft одновременно — это просто взрыв мозга!

Представьте: искусственный интеллект следит сразу за несколькими игроками в игре. Видел бы глазами каждого. Звучит как фантастика? А вот и нет — учёные это сделали. И результат поражает.

Проблема, о которой никто не думал

Обычные ИИ в играх предсказывают будущее только с одной точки зрения. Как будто у них туннельное зрение. Но в реальной жизни всё иначе.

Бросьте мяч другу. Вы видите, как он улетает. Друг — как приближается. Прохожий — как летит по дуге. Все взгляды должны сходиться. Это "согласованность в многопользовательских сценариях". Для ИИ — адская задача.

Знакомьтесь: Solaris — ИИ с многоглазым зрением

Исследователи создали Solaris. Эта система моделирует Minecraft сразу с нескольких углов. Два игрока стоят напротив. Один ставит блок. Solaris показывает его и в поле первого — и во втором, с правильным светом, тенями и перекрытиями. Всё идеально синхронизировано.

Почему именно Minecraft? Гениальный выбор

Minecraft — идеальный полигон. Вот факты:

Сложная 3D-графика. Углы обзора меняются, объекты прячутся, нужно считать пространство. Голова кругом.

Всё в движении. Строят, ломают, бегают. ИИ фиксирует изменения с любого ракурса.

Полная непредсказуемость. Мобы появляются внезапно, погода меняется, события случаются. ИИ отличает действия игроков от случайностей.

Ключ к успеху: фабрика данных SolarisEngine

Чтобы обучить такой ИИ, нужны тонны данных о многопользовательских сессиях. Раньше их не было. Учёные собрали SolarisEngine.

Боты-ИИ играют вместе: копают, строят, дерутся, исследуют. Собрали 12 миллионов кадров. Это часы синхронизированной съёмки с разных глаз.

Плюс: система работает круглосуточно. Генерирует данные nonstop. Как ферма ИИ-игроков на серверах.

Как это работает под капотом

Solaris использует модель диффузии видео. Берёт шум и превращает в чёткие кадры. Но сразу для всех взглядов.

Ещё трюк: "Checkpointed Self Forcing". Экономит память. ИИ запоминает ключевые моменты из длинных последовательностей, не перегружаясь.

Зачем это нужно? Не только для игр

"ИИ в Minecraft? Круто, но нафиг?" — спросите вы. Ответ есть.

Роботы. Координируют задачи, видя мир глазами друг друга.

Автопилоты. Машины понимают, как их манёвры выглядят для других авто и пешеходов.

Симуляторы. Тренировки для спасателей, хирургов — в реалистичных мирах.

Взгляд в будущее

Solaris крут не только результатом. Всё открыто: код, данные, тесты — бесплатно.

Это прорыв. От ИИ с одним глазом к системам, что держат в голове многомерный мир.

Пока это пиксели и блоки. Но все революции начинались с малого. Solaris — первый шаг к ИИ, который поймёт нашу сложную реальность с кучей углов.

Будущее — за такими многоглазыми умами. Оно уже здесь.

Источник: https://arxiv.org/pdf/2602.22208