Pika додає функцію Lip Sync від ElevenLabs

Навіть попри вражаючі досягнення OpenAI у розробці високоякісної моделі генерації відео Sora, доступ до цієї технології для широкої публіки залишається обмеженим. Проте інші компанії, які вже розробляють генератори відео зі штучним інтелектом, не стоять на місці. Сьогодні Pika, конкурент OpenAI, оголосив про випуск нової функції для своїх платних користувачів під назвою Lip Sync.

Ця функція дозволяє користувачам додавати голосові доріжки до своїх відео зі штучним інтелектом від ElevenLabs та супроводжувати їх відповідною анімацією, щоб губи персонажів рухалися у такт з розмовним діалогом.

Завдяки розробці ElevenLabs, нова функція Pika Lip Sync може перетворювати текст у звук або завантажувати аудіодоріжки. Таким чином, користувачі можуть написати або записати розмовний текст для своїх ШІ-персонажів у відео Pika та обирати стиль голосу, яким цей текст буде вимовлено.

Наразі ця функція доступна лише для користувачів Pika Pro (підписка вартістю 58 доларів на місяць) або для учасників програми Pika «Super Collaborators», яка доступна лише за запрошеннями через групу Discord.

Хоча відео, створені за допомогою Pika, можуть мати меншу якість і менш «реалістичний» вигляд, ніж ті, що генерує Sora від OpenAI або конкуруючий стартап Runway, нова функція синхронізації губ від Pika випереджає їх, вносячи можливості, що революціонізують звичайне програмне забезпечення для кінематографії.

Завдяки функції синхронізації губ Pika усуває один з останніх перешкод для використання штучного інтелекту в створенні довгих оповідних фільмів. Більшість інших провідних відеогенераторів зі штучним інтелектом наразі не мають подібної функції.

Нагадаємо, ElevenLabs впроваджує штучний інтелект для створення звукових ефектів.