По данным Microsoft (MSFT), эта модель под названием Muse является первой в своем роде. По словам Кати Хофманн, старшего главного менеджера по исследованиям в Microsoft, исследовательская группа по машинному обучению опросила разработчиков игр, чтобы выяснить, насколько полезным может быть генеративный ИИ и что им необходимо для того, чтобы такие инструменты были эффективными. Затем для обучения модели ИИ команда Хофманна собрала данные игрового процесса за семь лет из Bleeding Edge, многопользовательской боевой игры 2020 года от студии Xbox Ninja Theory. «Если вы раньше не видели ни одного из этих сгенерированных геймплейных кадров, вы можете подумать, что это просто отрывки из видеоигры», — сказал Хофманн во время демонстрации для журналистов. Модель Muse была анонсирована в среду в журнале Nature.
Команда Microsoft Xbox и другие игроки отрасли стремятся использовать ИИ, чтобы сократить сотни миллионов долларов, которые студии обычно тратят на блокбастеры, — расходы, которые резко возросли за последние годы, несмотря на замедление роста продаж. Это спорно, поскольку игроки подозревают, что генеративный ИИ может повредить качеству игры. А сотрудники студии, уже пострадавшие от серии увольнений, обеспокоены тем, что эта технология может еще больше сократить их ряды.
В Bleeding Edge соревнуются две команды по четыре человека, а игра проходит полностью онлайн. Все игры записываются с разрешения игроков. Это позволило исследователям собрать более миллиарда игровых изображений, связанных с соответствующим использованием контроллера. Результатом является то, что Microsoft называет «Моделью мира и действий человека». Как и большинство генеративных моделей ИИ, он создает что-то после получения подсказки — в данном случае последовательность визуальных эффектов после показа игровой сцены, созданной человеком. «Модель способна генерировать нечто действительно последовательное, демонстрирующее очень точное понимание реального игрового мира», — сказал Хофманн. Элементы, созданные ИИ, включают взаимодействие между персонажами и другими элементами игры.