Присоединяйтесь к нашим группам

Ученые научили машину читать по губам

Ученые научили машину читать по губам

Современные слуховые аппараты хоть и позволяют людям с нарушением слуха слышать окружающих, но все равно имеют свои недостатки. В частности, они не обеспечивают внятное звучание в шумных комнатах с несколькими людьми. Исследователи из Сианьскиого университета Цзяотун-Ливерпуль придумали, как решить эту проблему. Они предложили оснащать аппараты камерами и системой, способной читать по губам и убирать лишние звуки.

14 12 2018
11:11

Сегодняшние слуховые аппараты уже умеют фильтровать шум, но до совершенствам им еще далеко. Глава исследовательской группы Эндрю Абель объяснил, что при общении люди не полагаются только на звук, а обращают внимание на мимику и движения рук. Именно этот факт вдохновил команду на создание аппарата с функцией чтения по губам.

При общении мы смотрим на лицо, то есть всегда в какой-то степени читаем по губам. До сих пор мы не могли включить эту особенность в технологию слуховых аппаратов, но мы намерены изменить это.

Предполагается, что будущая система будет следить за мимикой собеседника при помощи небольшой камеры. Фиксируя движения губ человека, технология сможет увеличивать частоты, с которыми говорит человек напротив. Сторонние шумы будут приглушены, причем алгоритм будет фильтровать разные типы шумов, в зависимости от того дом это, офис или шумное кафе.

На данный момент алгоритм способен распознавать открытый и закрытый рот, а также его ширину. Он работает на разных людях и требует минимум энергии — возможно, для работы системы потребуются только небольшие батарейки.


Источник: https://hi-news.ru/