Исследователи Microsoft достигли значительного прорыва в области искусственного интеллекта, создав модель Muse, способную понимать и взаимодействовать с трехмерными пространствами так же, как это делают люди. Эта разработка позволяет ИИ анализировать и создавать сложные игровые сценарии, сохраняя при этом реалистичную физику и поведение персонажей.
Оглавление
Как Muse видит, учится и играет
Muse была обучена на основе данных, собранных за семь лет из игры Bleeding Edge для Xbox. В отличие от традиционных моделей ИИ, работающих с текстом или статичными изображениями, Muse способна анализировать взаимодействие объектов, персонажей и окружения в трехмерном пространстве с течением времени.
Катя Хофманн, старший руководитель исследований в Microsoft Research, объяснила:
«Архитектура модели не привязана к конкретной игре. Единственное требование — наличие подходящего набора данных. Мы разработали модель для работы с универсальным форматом данных, который включает визуальную информацию и действия, выполняемые с помощью контроллера».
Этот подход позволяет Muse создавать последовательные игровые сценарии длительностью до двух минут. Система способна анализировать всего одну секунду игрового видео и на ее основе генерировать сложные сцены, учитывающие физику игры и поведение персонажей.
Однако у модели есть ограничения. Хофманн отметила: «Разрешение изображений фиксировано на уровне 300×180 пикселей. Существует компромисс между размером модели и скоростью работы: самые крупные и точные модели работают медленнее».

Применение Muse за пределами игровой индустрии
Разработка Muse велась с учетом мнений игровых разработчиков. Microsoft провела интервью с 27 специалистами из разных стран, чтобы убедиться, что технология отвечает реальным потребностям творческих профессионалов.
Питер Ли, президент Microsoft Research, отметил, что Muse может найти применение в архитектуре, розничной торговле и производстве. Например, технология может помочь в перепланировке кухни, redesignе торговых помещений или создании цифровых двойников заводов для тестирования различных сценариев.
Проверь свои знания в наших бесплатных тестах по ИИ! Пройди тест и узнай, насколько хорошо ты разбираешься в технологиях искусственного интеллекта!
Хофманн добавила: «Основное ограничение для применения вне игр — доступ к качественным данным. Игры — идеальная среда для развития технологии, так как в них проще собирать большие объемы данных».
Сохранение игровой истории и поддержка разработчиков
Для игровой индустрии Muse открывает новые возможности. Xbox изучает, как технология может помочь в сохранении классических игр. Фатима Кардар, вице-президент по игровому ИИ в Microsoft, заявила: «Мы исследуем возможность использования Muse для оптимизации старых игр и их адаптации для современных устройств».
Muse демонстрирует три ключевых инновации:
- Поддержание реалистичной физики и игровой механики на протяжении длительных сцен.
- Генерация нескольких вариантов развития событий из одной начальной точки.
- Возможность для пользователей вносить изменения в созданный контент, сохраняя их согласованность.
Будущее Muse и роль человеческого творчества
Microsoft выпускает веса модели и демонстрационный инструмент для исследователей и разработчиков по лицензии Microsoft Research. Это решение направлено на стимулирование дальнейших исследований и экспериментов с технологией.
Разработка Muse знаменует переход от анализа статичного контента, такого как текст и изображения, к пониманию динамичных трехмерных сред и взаимодействий. Это открывает новые горизонты для проектирования и взаимодействия с виртуальными пространствами в различных отраслях.
Microsoft подчеркивает, что Muse создана как инструмент для поддержки творчества, а не для замены человеческих разработчиков. Технология призвана расширить возможности креативных профессионалов, а не автоматизировать их работу.
Основные преимущества Muse:
- Понимание сложных трехмерных сред.
- Генерация реалистичных игровых сценариев.
- Поддержка творческого процесса в играх и других отраслях.
Muse представляет собой важный шаг в развитии ИИ, открывая новые возможности для создания интерактивных и персонализированных виртуальных миров.