Дослідники Корнельського університету розробили прототип сонарних окулярів, які можуть беззвучно зчитувати рухи особи для спілкування. Окуляри використовують крихітні мікрофони та динаміки для інтерпретації слів, що вимовляються власником для виконання таких команд, як пропуск музичного треку, введення пароля або навіть робота над моделями CAD без використання клавіатури. Цей прорив у розпізнаванні беззвучної мови є значним, оскільки більшість технологій у цій галузі покладаються на заздалегідь визначені команди та камери, що є непрактичним.
Руідонг Чжан, аспірант з Корнелла, розробив систему, яка ґрунтується на аналогічному проєкті з використанням бездротових навушників та попередніх моделей з камерами. Окуляри усувають необхідність дивитися в камеру або вставляти у вухо навушники, що робить їх зручнішими. Сонарні окуляри вимагають всього кілька хвилин навчання, щоб вивчити мовні патерни користувача, а потім використовують алгоритми глибокого навчання для аналізу профілів в режимі реального часу, щоб знайти рухи рота та поведінки з точністю близько 95%.
Окуляри передають обробку даних бездротового зв'язку на смартфон користувача, завдяки чому аксесуар залишається невеликим і непомітним. Вони забезпечують близько 10 годин автономної роботи в режимі акустичного зондування, і жодні дані не залишають телефон, що усуває побоювання щодо конфіденційності. Аспект конфіденційності робить технологію придатною для управління відтворенням музики в бібліотеці, диктування повідомлення на гучному концерті або навіть для беззвучної передачі діалогу до синтезатора голосу для людей із деякими видами мовних порушень.
Технологія незабаром може стати загальнодоступною. Крім того, команда також вивчає можливості застосування смарт-окулярів для відстеження рухів обличчя, очей та верхньої частини тіла.
Джерело: engadget
