Голосовой ассистент в смартфоне отныне распознаёт беззвучную речь

Гаджет улавливает все движения губ владельца.

Китайские учёные сумели добавить в смартфон инновационную технологию, благодаря которой устройства умеет распознавать совершенно беззвучную речь. Специалисты Университета Цинхуа во главе с Юаньчунь Ши разработали качественно новый мобильный голосовой помощник, который считывает движения губ владельца, понимая произносимую им речь, даже если она не слышна. Чтобы воспользоваться данным ассистентом необходимо проговорить в камеру определённый приказ или запрос, после чего приложение автоматически проанализирует положение губ, зафиксировав 20 основных точек во время движения рта.

Приложение использует продвинутые алгоритмы свёрточной нейросети, которые сопоставляют полученные данные с существующей базой мимики человека, определяя сказанные слова с невероятной точностью. В будущем учёные планируют перенести данную технологию на смартфоны, так как в данный момент процедура распознавания беззвучной речи из-за сложности процесса может быть осуществлена лишь на связке гаджета с достаточно мощным ПК.

Источник