Meta представляет новую модель искусственного интеллекта Movie Gen, которая может создавать реалистичное видео со звуком

Meta представила Movie Gen, передовую модель искусственного интеллекта, предназначенную для создания высокореалистичных видео- и аудиоклипов в ответ на запросы пользователя. Этот инструмент, который, по утверждению Meta, конкурирует с лидерами отрасли, такими как OpenAI и ElevenLabs, знаменует собой значительное развитие в сфере медиа, генерируемых искусственным интеллектом.

По данным Meta, Movie Gen может создавать видеоклипы длиной до 16 секунд и аудиоклипы длиной до 45 секунд, генерируя как визуальные, так и звуковые эффекты, которые легко синхронизируются с контентом. В своем блоге компания продемонстрировала примеры возможностей инструмента, в том числе видеоролики о плавающих животных и людях, выполняющих творческие задачи, например рисование на холсте. Одна демонстрация даже показала, как ИИ вставляет помпоны в руки человека, бегущего по пустыне, а другая превратила сухую парковку в сцену, заполненную лужами, со скейтбордистом.

Movie Gen не ограничивается созданием нового контента; его также можно использовать для редактирования существующих видео, расширяя творческие возможности создателей контента. Инструмент искусственного интеллекта также генерирует фоновую музыку и звуковые эффекты, что еще больше повышает качество клипов.

Мета выделила данные слепых тестов, которые показывают, что Movie Gen превосходит предложения таких конкурентов, как Runway, OpenAI, ElevenLabs и Kling. Однако, в отличие от своих широкоязычных моделей Llama, Meta не планирует выпускать Movie Gen для открытого использования разработчиками, ссылаясь на необходимость оценивать риски индивидуально для каждой модели.

Вместо этого Meta планирует напрямую сотрудничать с индустрией развлечений и создателями контента, включив этот инструмент в свои продукты где-то в следующем году. По словам Меты, модель была построена с использованием сочетания лицензированных и общедоступных наборов данных.

Это объявление было сделано в то время, когда генеративная видеотехнология искусственного интеллекта вызывает в Голливуде как волнение, так и беспокойство. Кинематографисты стремятся изучить, как такие инструменты, как Movie Gen, могут оптимизировать производство и воплощать в жизнь инновационные идеи. Однако многие с подозрением относятся к системам искусственного интеллекта, обученным работе с произведениями, потенциально защищенными авторским правом, что поднимает этические и юридические вопросы. Подобные споры уже возникли вокруг модели Sora от OpenAI, особенно после обвинений актрисы Скарлетт Йоханссон в том, что ее голос был имитирован без разрешения.

Хотя OpenAI ведет переговоры с голливудскими студиями о возможном партнерстве, ни одна сделка еще не заключена. Тем временем компания Lions Gate Entertainment, известная по фильмам «Голодные игры» и «Сумерки», уже заключила партнерское соглашение со стартапом в области искусственного интеллекта Runway, предоставив доступ к его фильмотеке в обмен на возможность использовать обученную модель в будущих постановках.

Помимо применения в сфере развлечений, фейки, или дипфейки, создаваемые искусственным интеллектом, вызывают тревогу во всем мире, особенно в связи с их использованием в политических кампаниях. Законодатели в таких странах, как США, Индия, Пакистан и Индонезия, выразили обеспокоенность по поводу того, как ИИ может повлиять на выборы посредством создания вводящего в заблуждение контента.

Meta не предоставила конкретных подробностей о том, как она планирует решать подобные проблемы с помощью Movie Gen, но подтвердила, что использование инструмента будет тщательно контролироваться, особенно в развлекательном контексте.