Согласно патенту, который Apple подала в январе этого года, компания описывала технологию, с помощью которой Siri будет использовать "данные о движении" для чтения по губам.
На данный момент голосовой помощник Siri в основном полагается на динамики и может выполнять соответствующие команды после того, как услышит голосовые команды, такие как "Hey Siri", "Skip" или "Next Song". Однако все эти команды могут быть улучшены благодаря алгоритму, анализирующему части рта пользователя.
Apple объясняет, что существуют очевидные проблемы с системами распознавания голоса, такими как Siri. Голос может искажаться из-за фонового шума, а другие датчики, которые постоянно следят за голосом человека, расходуют большое количество заряда аккумулятора и вычислительной мощности. Можно было бы предположить, что для реализации новой технологии будет необходима камера, однако вместо этого программа распознавания голоса может использовать один из датчиков движения на телефоне для записи движений рта и определения того, может ли это движение указывать на человеческую речь.
Такими датчиками могут быть акселерометр или гироскоп, которые, как отмечает Apple в своем патенте, не только снизят энергопотребление и нагрузку на обработку, но и повысят точность.
При этом не обязательно использовать только телефон: в патенте описывается, как подобные датчики движения могут быть встроены в AirPods или даже в "умные очки", которые затем будут передавать данные на iPhone пользователя. С помощью датчиков новая технология сможет распознавать едва заметные движения лицевых мышц, губ и движения головы.
