17.11.2023 09:20
Meta представила дві нові моделі штучного інтелекту для створення відео та редагування зображень
Компанія Meta, що займається соціальними мережами, представила дві нові моделі штучного інтелекту для створення відео та редагування зображень.
Одна модель, Emu Video, здатна генерувати відеокліпи на основі введеного тексту та зображень. Друга модель, Emu Edit, дозволяє користувачам редагувати зображення більш точно, ніж раніше.
Обидві моделі все ще перебувають на стадії дослідження, але Meta каже, що перші результати показують їхній потенціал для використання як творцями, так і художниками та аніматорами.
Emu Video
Emu Video навчали за допомогою «факторного» підходу, розділивши процес навчання на два етапи. Спочатку генерування зображень на основі текстової підказки, а потім генерування відео на основі як тексту, так і згенерованого зображення.
Ця модель може також «оживляти» зображення на основі текстової підказки. Замість того, щоб покладатися на «глибокий каскад моделей», Emu Video використовує лише дві дифузійні моделі, щоб генерувати чотирисекундні відео розміром 512×512 зі швидкістю 16 кадрів на секунду.
Emu Edit
Emu Edit орієнтований на маніпуляції із зображеннями. Він дозволяє користувачам видаляти або додавати фон до зображень, виконувати кольорові та геометричні перетворення, а також локальне та глобальне редагування зображень.
Мета стверджує, що їхня модель здатна точно виконувати інструкції, наприклад, додавати текст до бейсболки, не змінюючи саму бейсболку.
Emu Edit тренували на наборі даних з 10 мільйонів синтезованих зображень. Кожне з зображень містило вхідне зображення та опис завдання, а також цільове вихідне зображення.
Регуляторні ризики
Регулятори уважно вивчають інструменти Meta на основі штучного інтелекту, що призводить до обережного підходу технологічної компанії до їх розгортання.
Нещодавно Meta оголосила, що не дозволить політичним кампаніям і рекламодавцям використовувати свої інструменти штучного інтелекту для створення реклами у Facebook і Instagram. Однак загальні рекламні правила платформи не містять жодних правил, що стосуються конкретно штучного інтелекту.
Нещодавно компанія Meta також досягла успіхів у розробці соціальних ШІ-агентів.