8 апреля 2023
Аспирант Корнеллского университета (США) Жуйдун Чжан (Ruidong Zhang) разработал оборудованные сонаром очки EchoSpeech, способные «слышать» беззвучную речь своего владельца — достаточно лицевой артикуляции. Очки могут использоваться в качестве стандартного устройства ввода.
Жуйдун Чжан (Ruidong Zhang). Источник изображения: ruidongzhang.com
Новый проект автора основан на предыдущей разработке, в рамках которой он установил камеры на беспроводные наушники. Формат очков оказался для этих целей более удобным: пользователю не нужно смотреть в камеру или вставлять что-то в ухо. Данные с установленных на очки динамиков и микрофонов по беспроводному каналу передаются на смартфон, где обрабатываются алгоритмами искусственного интеллекта.
При первом использовании требуется калибровка EchoSpeech, позволяющая ИИ изучить особенности мимики пользователя — достаточно всего нескольких минут, за которые человеку предлагается, например, зачитать несколько чисел. Когда настройка завершена, точность срабатывания системы достигает 95 %. Использование смартфона для обработки данных позволяет очкам оставаться компактными и ненавязчивыми, обеспечивать им до 10 часов автономной работы и гарантировать, что вся информация остаётся на телефоне — его производительности достаточно для локальной обработки всех данных.
На практике у EchoSpeech может быть множество самых разных применений: управление программами на ПК, беззвучное управление музыкальным проигрывателем без рук, возможность диктовки сообщения на громком концерте, или даже совместная работа с голосовым синтезатором для людей с нарушениями речи — они снова заговорят. Сейчас авторы проекта рассматривают возможности вывода технологий на рынок при участии действующей в Корнеллском университете программы финансирования.
Хочешь узнать больше - читай отзывы
← Вернуться на предыдущую страницу
Прем'єр Хорватії назвав Путіна "каталізатором" розширення ЄС 1 октября 2024
Вторгнення РФ в Україну у 2022 році підштовхнуло більше країн до вступу в блок, пояснив Андрій Пленкович.
Український фільм "Ти – Космос" отримав головну нагороду кінофестивалю в Страсбурзі 1 октября 2024
Український фільм "Ти – Космос" отримав головну нагороду кінофестивалю в Страсбурзі. Трейлер В український прокат стрічка вийде у 2025 році
Осадча привітала первістка з 22-річчям та показала рідкісні фото з ним 30 сентября 2024
41-річна телеведуча Катерина Осадча ніжно привітала свого старшого сина Іллю з 22-річчям та показала спільні рідкісні фото.