Голосовой помощник в смартфоне научился распознавать беззвучную речь

Ученые из Китая добавят в смартфоны уникальную технологию, благодаря которой голосовой ассистент сможет распознавать даже беззвучную речь. TengriMIX рассказывает подробности.

Новая программа представлена на конференции UIST 2018. По словам научных сотрудников Университета Цинхуа, их разработка способна считывать движения губ пользователя девайса, при этом понимая даже ту речь, которую расслышать невозможно. Чтобы воспользоваться данной функцией, необходимо проговорить в камеру любой приказ или запрос. В это же время программа начнет автоматический анализ положения губ и фиксацию более 15 основных точек при движении рта. Это приложение используется современными алгоритмами сверточной нейросети, сопоставляющей полученные данные с реальной базой человеческой мимики, определяя сказанные слова с большой точностью.

Специалисты планируют уже вскоре перенести данную функцию и на смартфоны, ведь сейчас процедура распознавания беззвучной речи очень сложная и требует соединения устройства с весьма мощным персональным компьютером.