09.10.2024
21

Movie Gen – ШІ для генерації відео зі звуком

Юлія Заблоцька
автор ApiX-Drive
Час прочитання: ~1 хв

Meta представила нову модель штучного інтелекту під назвою Movie Gen, призначену для генерації реалістичних відео та аудіо за запитами користувачів. Компанія вважає, що вона цілком може скласти конкуренцію розробкам таких гігантів, як OpenAI та ElevenLabs. Презентація новинки включала відео з тваринами, зображеними під час плавання та серфінгу, та людьми, що малюють на полотні. Ці відео були згенеровані на основі реальних фотографій, наданих користувачами.

Крім відео, Movie Gen здатна створювати фонову музику і звукові ефекти, які гармонійно доповнюють візуальний ряд. Наприклад, цей ШІ може додавати звуки двигуна автомобіля, грому або шуму водоспаду відповідно до зображуваного контенту, а також робити звукове оформлення вже наявних відео.

За інформацією від Meta, максимальна тривалість відео, створених Movie Gen, складає 16 секунд, а частота – 16 кадрів на секунду. Тривалість аудіо більша – до 45 секунд. Тестування показало, що результати цього генератора є конкурентоспроможними порівняно з продуктами таких потужних компаній, як Runway, OpenAI, ElevenLabs і Kling.

Представники Meta вказали, що, на відміну від таких попередніх моделей, як Llama, доступ до Movie Gen для сторонніх розробників навряд чи буде відкритий. Вони оцінюють потенційні ризики і передусім дбають про безпеку. Однак компанія планує тісно співпрацювати з представниками індустрії розваг і творцями контенту.

***

Apix-Drive – простий та ефективний конектор систем, який допоможе вам автоматизувати рутинні завдання та оптимізувати бізнес-процеси. Ви зможете заощаджувати час та кошти, спрямувати ці ресурси на найважливіші цілі. Протестуйте ApiX-Drive і переконайтеся, що цей інструмент розвантажить ваших співробітників і вже після 5 хвилин налаштувань ваш бізнес почне працювати швидше.