Ученые создали голосовой помощник для смартфонов, умеющий распознавать речь по движениям губ, даже если пользователь не издает звуков
Смартфоны смогут распознавать беззвучную речь. Фото: alspirit.org
Китайскими учеными из Университета Цинхуа был разработан голосовой ассистент для смартфонов, способный распознать речь по движениям губ, даже когда человек не издает звуков.
Сообщается, что это стало возможным благодаря использованию двух нейронных сетей. Одна нейросеть следит за положением 20 контрольных точек, описывающих форму губ и уровень открытости рта, с помощью встроенной камеры смартфона. Вторая — использует все полученную информацию для распознавания речи. На сегодня приложением поддерживается 44 команды.
Обучение нейросетей происходило на основе речи 21 человека. Средняя точность распознавания оказалась равной 95,5%.
По результатам предварительных испытаний большинство пользователей предпочло такой формат стандартным голосовым командам, посчитав его более конфиденциальным и удобным.
СПРАВКА PAYSPACE MAGAZINE
Ранее мы писали об обновлении функционала голосового пощника от Google. Также сообщалось, в аэропорту Дубая паспортный контроль был заменен биометрическим тоннелем.
ЧИТАЙТЕ ТАКЖЕ: Инновации в действии: какой будет городская жизнь к 2030 (фото, видео)
По материалам itc.ua
