Adobe нарешті оприлюднила публічну бета-версію моделі генерування відео Firefly

Adobe представила нові можливості створення відео на платформі Firefly AI, пропонуючи користувачам перший погляд на моделі перетворення тексту у відео та зображення у відео. Цей реліз відбувся напередодні щорічного заходу Adobe MAX і став дебютом відеоінструментів Firefly, доступних на вебсайті Adobe та в бета-версії у застосунку Premiere Pro.

На сайті Firefly користувачі можуть експериментувати зі створенням п’ятисекундних анімованих або фотореалістичних кліпів на основі текстового опису або завантаженого зображення. Інтерфейс також дозволяє користувачам керувати параметрами камери, такими як панорамування, інтенсивність руху та розмір кадру. У бета-версії Premiere Pro Adobe представила Generative Extend — інструмент, призначений для подовження відеокліпів на дві секунди, безперервного продовження руху і звуку, але без відтворення голосів або музики, що дозволяє уникнути проблем з авторськими правами. Звук, згенерований штучним інтелектом, фокусується виключно на фонових звуках.

Firefly Generative Extend отримав високу оцінку за своє практичне застосування, але його модель перетворення тексту у відео не досягла візуальної якості конкурентів, таких як Runway’s Gen-3 Alpha. Однак Adobe навмисно зосередилася на функціях редагування контенту зі штучним інтелектом, щоб відповідати потребам своїх творчих користувачів. Замість того, щоб створювати нові відео з нуля, інструменти ШІ від Adobe спрямовані на покращення та розширення чинного контенту, розв’язуючи такі проблеми, як недостатня довжина кліпу, а не повністю замінюючи людей, які його створюють.

Александру Костін, віцепрезидент Adobe з питань генеративного штучного інтелекту, підкреслив, що стратегія компанії полягає в тому, щоб допомогти творчим працівникам покращити свої робочі процеси, а не перешкоджати їм. Костін стверджує, що ШІ в кінцевому підсумку піде на користь творчим працівникам, дозволяючи їм ефективніше створювати більше контенту, не применшуючи при цьому їхньої ролі. Він порівнює трансформаційний потенціал штучного інтелекту з попередніми інноваціями, такими як цифрова фотографія та видавнича справа, які спочатку були сприйняті скептично, але згодом розширили творчі можливості.

Adobe також не забуває про етичні аспекти, навчаючи моделі Firefly працювати з комерційно безпечним контентом — за винятком проблемних зображень або матеріалів, захищених авторським правом, — і гарантуючи, що створений штучним інтелектом цифровий підпис буде вбудований у метадані. Хоча це маркування не є помітним для глядачів, його можна виявити за допомогою інструментів ідентифікації ШІ, що забезпечує прозорість медіа, створених за допомогою ШІ.

Загалом, підхід Adobe до Firefly спрямований на підтримку наявних творчих процесів, забезпечуючи баланс між інноваціями та збереженням цілісності ролі митця. Пропонуючи інструменти штучного інтелекту, які допомагають, а не замінюють, Adobe сподівається переконати скептиків у своїй творчій аудиторії, що ці інструменти стануть органічною частиною майбутніх робочих процесів.