Movie Gen: когда ИИ становится режиссером вашей жизни

Meta* представила новую систему генерации видео с использованием искусственного интеллекта (ИИ) под названием Movie Gen, которая способна создавать видеоролики высокого разрешения со звуком. Этот анонс последовал спустя несколько месяцев после того, как OpenAI объявила о своей модели текст-видео под названием Sora . Однако пока доступ к Movie Gen не предоставляется широкой публике.

Movie Gen позволяет генерировать видео на основе текстовых вводов, а также редактировать существующие видеоролики и изображения. Звуковое сопровождение, добавляемое к видео, также создаётся с помощью ИИ и включает в себя окружающие звуки, звуковые эффекты и фоновую музыку. Видео может создаваться в различных форматах и пропорциях изображения.

Кроме создания новых видеоклипов, Movie Gen предоставляет возможность изменять различные элементы уже существующих видеоматериалов. Один из примеров, представленных Meta, демонстрирует изображение женщины, сидящей на поле с тыквами, и видео, созданное на основе этой фотографии. При этом исходное изображение было простым портретом.

Movie Gen также способен редактировать существующие видеоролики, изменяя их стиль, переходы и добавляя новые элементы, которых изначально не было. Meta показала видеоролик с изображением бегуна, который с помощью ИИ был преобразован: в одной версии бегун держит помпоны, в другой — фон заменен на пустыню, а в третьей — бегун одет в костюм динозавра. Все изменения осуществляются с помощью текстовых команд.

За последние два года технологии генерации изображений и видео с использованием ИИ достигли значительного прогресса. Такие компании, как Google и OpenAI, активно разрабатывают подобные инструменты, а стартапы также вносят свой вклад в развитие этой технологии. Несмотря на значительное развитие, OpenAI пока не запустила Sora в открытый доступ, а один из её ведущих разработчиков перешёл на работу в Google.

В Meta признают, что Movie Gen пока не готов к полноценному запуску. Главный директор по продуктам компании Крис Кокс отметил, что создание видео всё ещё занимает слишком много времени, а стоимость генерации остаётся высокой.

Технологии ИИ уже вызывают обеспокоенность в вопросах авторских прав и возможных негативных сценариев их использования. Сообщается, что некоторые стартапы для обучения своих моделей использовали видео с YouTube, что нарушает условия использования платформы. Meta заявила, что Movie Gen был обучен на «комбинации лицензированных и общедоступных наборов данных», но конкретные источники не раскрыла.

Творческие сообщества, включая режиссёров, фотографов, художников и актёров, выражают обеспокоенность относительно того, как использование ИИ может повлиять на их профессиональные сферы. Эти вопросы стали ключевыми на фоне забастовок, таких как историческая совместная акция голливудских актёров и сценаристов в 2023 году.

* Компания Meta и её продукты признаны экстремистскими, их деятельность запрещена на территории РФ.