Владелец Meta* и Facebook** в пятницу объявил о создании новой модели искусственного интеллекта под названием Movie Gen, которая может создавать реалистичные видео- и аудиоклипы в ответ на запросы пользователей, утверждая, что она может конкурировать с инструментами ведущих стартапов-производителей медиа, таких как OpenAI и ElevenLabs.
Примеры творений Movie Gen, предоставленные Meta (META), включали видео с животными, плавающими и занимающимися серфингом, а также видео с использованием реальных фотографий людей, чтобы показать, как они выполняют такие действия, как рисование на холсте. Movie Gen также может создавать фоновую музыку и звуковые эффекты, синхронизированные с содержимым видео и использовать этот инструмент для редактирования существующих видео. В одном из таких видео Meta заставил инструмент вставить помпоны в руки человека, бегущего в одиночестве по пустыне, а в другом он превратил парковку, где человек катался на скейтборде, из сухой земли в покрытую лужей с брызгами.
Видео, созданные Movie Gen, могут быть длиной до 16 секунд, а аудио — до 45 секунд, сказал Meta. Компания поделилась данными, показывающими слепые тесты, указывающие на то, что модель работает лучше, чем предложения стартапов, включая Runway, OpenAI, ElevenLabs и Kling. Это объявление появилось в то время, когда Голливуд в этом году боролся с тем, как использовать технологию генеративного видео ИИ, после того как в феврале поддерживаемая Microsoft (MSFT) OpenAI впервые продемонстрировала, как ее продукт Sora может создавать видеоролики, похожие на художественные фильмы, в ответ на текстовые подсказки.
Технологии в индустрии развлечений стремятся использовать такие инструменты для улучшения и ускорения кинопроизводства, в то время как другие обеспокоены принятием систем, которые, по-видимому, были обучены на работах, защищенных авторским правом, без разрешения. Законодатели также выразили обеспокоенность тем, как сгенерированные ИИ подделки, или дипфейки, используются на выборах по всему миру, в том числе в США, Пакистане, Индии и Индонезии. Представители Meta заявили, что компания вряд ли выпустит Movie Gen для открытого использования разработчиками, как это было с ее серией моделей большого языка Llama, заявив, что она рассматривает риски индивидуально для каждой модели. Они отказались комментировать оценку Meta конкретно для Movie Gen.
*организация, признанная экстремистской в РФ
**принадлежит Meta, которая признана экстремистской организацией в РФ
