Штучний інтелект може використовувати ескізи для виявлення прихованих об’єктів

Штучний інтелект, що використовує ескізи для виявлення об’єктів на зображенні, може покращити виявлення пухлин і пошук рідкісних видів птахів.

Вчені з Університету Суррея повідомляють, що навчання засобів машинного навчання виявляти конкретні об’єкти на зображенні та ігнорувати інші є “переломовим моментом”, який може призвести до покращень у виявленні раку.

Університет Суррея планує презентувати свій унікальний інструмент виявлення об’єктів на основі ескізів на конференції з комп’ютерного зору та розпізнавання образів (CVPR) цього року. Цей інструмент дозволяє користувачеві намалювати ескіз об’єкта, який штучний інтелект використовує як основу для пошуку чогось схожого на зображенні, враховуючи більш загальні варіанти.

Професор Ї-Чже Сон, який керує цим дослідженням в Інституті Штучного Інтелекту Університету Суррея, прокоментував:

“Ескіз художника повний індивідуальних вказівок, які словами не можна передати коротко, підкреслюючи фразу ‘картина каже багато слів’. Для новіших систем штучного інтелекту прості описові слова допомагають створювати зображення, але ні одне з них не може передати індивідуалізм користувача або точне збігання, яке шукає користувач.”

“Саме тут і стає актуальним наш інструмент на основі ескізів. Штучний інтелект за допомогою ескізу, створеного художником, виявляє точний об’єкт і ігнорує інші. Це може бути надзвичайно корисним у медицині, допомагаючи виявляти агресивні пухлини, або у збереженні дикої природи, виявляючи рідкісних тварин.”

Один з прикладів, який вчені наводять у своїй статті для конференції, – це використання інструменту для пошуку зебр на зображенні, де є багато зебр. Для пошуку використовується лише ескіз однієї зебри, що їсть. Інструмент штучного інтелекту бере до уваги візуальні підказки, такі як поза і структура, але приймає рішення на основі точних вимог, наданих аматорським художником.

Професор Сон продовжує:

“Можливість штучного інтелекту виявляти об’єкти на основі індивідуальних ескізів означає значний прорив у використанні творчості людини в комп’ютерному зорі. Це дозволяє людям взаємодіяти зі штучним інтелектом з зовсім іншої перспективи, більше не дозволяючи йому диктувати рішення, але вимагаючи, щоб він поводився точно за інструкціями, зберігаючи втручання людини, коли це необхідно.”

Це дослідження буде презентоване на конференції з конференції з комп’ютерного зору та розпізнавання образів (CVPR) 2023, де демонструється провідне світове дослідження в галузі штучного інтелекту. Університет Суррея має надзвичайно велику кількість прийнятих статей на CVPR 2023, значно більше, ніж в інших освітніх установах, з більш ніж 18 прийнятими статтями і однією номінованою на премію за найкращу статтю.