Meta планує запустити потужний генератор відео Movie Gen, який має з’явитися в Instagram у 2025 році

Новий інструмент зі штучним інтелектом від Meta, який називається Movie Gen, є суттєвим досягненням у постійних дослідженнях компанії. Модель, навчена на великому наборі даних, що включає 100 мільйонів відео та 1 мільярд зображень, вчиться розуміти візуальний світ. Компанія не уточнила, чи використовувані дані були ліцензійними або загальнодоступними, що вже викликало критику з боку деяких творців контенту. Така непрозорість може також призвести до подальших перевірок, оскільки вже були схожі випадки, коли розробники ШІ, такі як Runway, стикалися з юридичними проблемами щодо використання даних.

Однак, попри зазначені етичні проблеми, компанія Meta представляє Movie Gen як передовий інструмент у галузі генеративного ШІ. Процес його розробки поєднує в собі традиційне навчання з використанням дифузійної моделі, яка зазвичай використовується в ШІ для генерації відео та аудіо, з методами великих мовних моделей і новим принципом, відомим як узгодження потоків (Flow Matching). На відміну від традиційних дифузійних моделей, метод узгодження потоків покращує контроль над графіками шуму під час навчання, що призводить до більш послідовних, якісних результатів та підвищення ефективності як навчання, так і висновків.

Movie Gen включає два ключові компоненти: модель генерації відео з 30 мільярдами параметрів і модель генерації аудіо з 13 мільярдами параметрів. Відеомодель трансформується від генерації текст-зображення до генерації текст-відео, що дозволяє створювати 16-секундні кліпи у форматі HD. Завдяки точному налаштуванню моделі на високоякісних відео з титрами, Meta підвищила її оптимізацію і зробила її придатною для створення та редагування персоналізованого контенту. Звукова модель, навчена на більш ніж мільйоні годин звукових даних, синхронізується з елементами відео, створюючи реалістичні навколишні звуки, ефекти та фонову музику.

Цей реліз є важливою подією в розвитку генеративного ШІ компанії Meta, слідом за попередніми проєктами, такими як Make-A-Scene та моделі Llama Image. Meta розглядає Movie Gen як трансформаційний інструмент для створення відео, і позиціює його як доступний для звичайних користувачів, а також корисний для професіоналів, у тому числі для кіновиробників. На стадії дослідження Meta планує співпрацювати з творчими колективами, щоб удосконалити можливості інструменту. Метою є демократизація доступу до передових інструментів для редагування відео та аудіо, а майбутні оновлення можуть ще більше розширити його можливості, потенційно дозволяючи користувачам створювати анімаційний контент або цілі короткометражні фільми на основі текстового введення.

Запуск Movie Gen в Instagram запланований на 2025 рік, що дасть можливість широкому колу користувачів з легкістю створювати привабливий контент. Продовження розвитку цієї технології може змінити процес створення контенту на платформі, інтегрувавши ці передові інструменти в робочі процеси як професійних, так і незалежних творців.