Новинка может генерировать не только графические элементы, но и действия контролера. То есть нейросеть создает игровые сцены, персонажей и управляет ими в сгенерированной реальности, причем оба действия осуществляет одновременно.
Для разработчиков Microsoft уже опубликовала в открытом доступе демонстрационные данные о модели и ее весовые коэффициенты — параметры, определяющие силу связи между нейронами в нейронной сети. Muse предлагает понятный интерфейс, который облегчает взаимодействие с программой и делает его максимально наглядным.
Новая нейросеть разработана на основе большого массива данных из многопользовательской игры Bleeding Edge. Специалисты изучали особенности геймплея, управления персонажами, собирали анонимную информацию с разрешения самих игроков, чтобы детально разобрать всю специфику игрового мира.
В процессе обучения нейросети было использовано больше миллиарда изображений и действий контроллера, эквивалентных семи годам непрерывной игры. Благодаря этому ИИ-модель научилась создавать сложные игровые сцены. Muse способна генерировать несколько вариантов развития событий, сохранять пользовательские модификации и применять их в дальнейших игровых сценариях.
Нейросеть поможет разработчикам не только в тестировании игровых механик и прототипов, поскольку предлагает широкие возможности для работы с геймплеем. Новинка способна упростить рутинные задачи и адаптироваться под реальные потребности создателей видеоигр.