Опубликовано 24 мая 2023, 10:50
1 мин.

Глазные уши: инженеры создали очки, читающие речь по губам собеседника

Группа американских ученых из Корнельского университета под руководством Чэня Чжана разработала очки, которые способны читать речь по движению губ человека. Для распознавания в аксессуаре используется пара миниатюрных эхолокаторов. Устройство может эксплуатироваться людьми с нарушениями речи и слуха или в шумном пространстве.
Поделиться:
Глазные уши: инженеры создали очки, читающие речь по губам собеседника

© Cornell University

Команда исследователей создала инновационную оправу очков, работающую на основе искусственного интеллекта. Новая «тихая речевая технология» EchoSpeech с помощью двух мини-эхолокаторов и динамиков распознает речь на основе мимики пользователя и транслирует ее.

Изначально, чтобы воспроизвести слова, в подобных изобретениях использовалась видеокамера, направленная на лицо человека. Из-за этого аксессуары выглядели громоздко и доставляли дискомфорт. Эта же разработка инженеров почти незаметна.

EchoSpeech работает следующим образом: сперва встроенные в оправу мини-эхолокаторы за счет непрерывных частотно-модулированных ультразвуковых сигналов улавливают информацию о минимальных движениях губ и кожи лица говорящего. Затем машинный алгоритм анализирует полученный материал. После этого динамики, установленные с противоположной стороны очков, озвучивают то, что сказал пользователь.

По мнению изобретателей, EchoSpeech понадобится не только людям с нарушениями речи или слабослышащим. Технология может быть востребована в случаях, когда говорить вслух становится неудобно, например, из-за сильного окружающего шума.

Читайте по теме
Новости