Штучний інтелект, що читає думки, перетворює їх на текст і озвучує

Project Halo поєднує неінвазивний нейронний інтерфейс з генеративним ШІ для перетворення патернів біоелектричних сигналів у мову.

“Існує універсальна мова, яка відбувається всередині нашого мозку. Коли ви дивитеся на зображення функціональної магнітно-резонансної томографії людей, які розмовляють різними мовами, але думають про один і той самий об’єкт, вони в основному активують однакові ділянки мозку”, — підкреслив Васко Педро, генеральний директор Unbabel

Project Halo дозволяє користувачам отримувати озвучене повідомлення через навушники і відповідати мовчки, просто думаючи про те, що вони хочуть передати.

Цей метод реагування без мовлення чи друкування має безліч потенційних варіантів використання. Від буденних сценаріїв, таких як непомітна відповідь на повідомлення в темному кінотеатрі, до більш значущих ситуацій, таких як надання людям з бічним аміотрофічним склерозом можливості спілкуватися за допомогою тексту або аудіозаписів.

Користувачі можуть тренувати модель перетворення тексту в мовлення за допомогою свого голосу, що дозволяє їм “говорити” через систему.

Педро проілюстрував зворушливий приклад, коли Project Halo дав можливість пацієнту з бічним аміотрофічним склерозом беззвучно передати дружині своє замовлення на обід. Система декодувала його бажану відповідь з нейронних сигналів, синтезуючи текстову відповідь у цифровому представленні його оригінального голосу, записаного до того, як він втратив здатність говорити.

Хоча Unbabel не перший, хто заглиблюється в ШІ, що читає думки, Project Halo виділяється своєю здатністю читати думки і генерувати природні мовні відповіді. Система інтегрує мовну модель, яка вивчає особистий контекст користувача, його стосунки, вподобання тощо, щоб створювати повідомлення, які достовірно відображають наміри користувача.

Важливо, що Project Halo не є неконтрольованою технологією зчитування думок; користувачі повинні справді мати намір ввести відповідь, щоб пристрій відповів. Модель обробляє близько 15 слів за хвилину, що є суттєвим покращенням у порівнянні з повільнішими традиційними методами.

Хоча проект Halo наразі перебуває на початковій стадії, Unbabel планує запустити його в комерційне використання у 2024 році. Педро вважає, що Halo сприятиме безперешкодному спілкуванню для всіх, незалежно від фізичних можливостей, з кінцевою метою зробити ШІ силою добра та усунути мовні бар’єри.