Исследователи из Гонконга научили нейросеть идентифицировать пользователя по движению губ

Татьяна Новак

Учёные Гонконгского баптистского университета разработали новый метод биометрической аутентификации, который позволяет распознавать пользователя по движениям его губ во время произнесения пароля. Алгоритм объединяет две технологии: машинное чтение по губам и распознавание движений.

Разработчики уже запатентовали свой метод в США, но пока не разглашают технические подробности его работы. Известно, что для распознавания движений губ они используют нейросеть, обученную различать все визуальные характеристики губ человека, включая форму, текстуру и паттерны движения.

Авторы утверждают, что каждый человек имеет уникальные характеристики движений губ во время разговора. «Два человека произнесут один и тот же пароль по-разному, и система обучения может их отличить», — говорит профессор информатики Чун Ю-мин. По его словам, этот метод лучше, чем голосовая активация, так как него не влияет окружающий шум, кроме того, им могут пользоваться люди с нарушениями речи.

Профессор информатики Чун Ю-мин демонстрирует работу системы аутентификации по движениям губ. Фото: Hong Kong Baptist University

Исследователи пишут, что распознавание губ сможет повысить уровень безопасности в любой системе. В первую очередь они планируют использовать его для идентификации личности в платёжных приложениях. В частности, распознавание губ можно объединить с системой распознавания лиц, чтобы сделать невозможным мошенничество с помощью фотографий. Сейчас платёжные систмемы с распознаванием лиц просят клиента кивнуть головой или моргнуть — таким образом алгоритм проверят, что перед ним живой человек, а не его фотография.

Ранее учёные из Оксфорда и DeepMind научили нейросеть читать по губам речь телеведущих BBC с точностью 46,8%. А исследователи из Оксфордского университета создали машинный алгоритм чтения по губам LipNet, который показал результат выше — 93% правильных слов, однако его пока испытали только на ограниченной базе данных.

Загрузить еще