На сайте используются cookies. Продолжая использовать сайт, вы принимаете условия
Ok
1 Подписывайтесь на Газету.Ru в MAX Все ключевые события — в нашем канале. Подписывайтесь!
Все новости
Новые материалы +

Чтение по губам в 6 раз повышает эффективность распознавания неясной речи

Движения рта во время разговора повышают эффективность узнавания слов в шумной обстановке в 6 раз. Вэй Цзима из Бэйлорского медицинского колледжа и его коллеги опубликовали результаты соответствующего математико-визуально-акустического исследования в PLoS ONE.

В том, что зрительная информация может подкреплять и уточнять звуковой ряд, ученые, да и обыватели, не сомневались и раньше, но на этот раз учёные предложили новый подход как к изучению, так и к количественной оценке этого феномена. Для этого они создали модель с несколькими измерениями, где визуальная и зрительная информация с соответствующими помехами воспринимаются отдельно, а потом объединяются, причём в роли дополнительного условия может выступать и зрительный и звуковой источник.

Количественные данные ученые получили после часов демонстрации 700 английских слов 33 англоговорящим участникам. Так, выяснилось, что максимальный эффект «чтения по губам» достигается при умеренно небольшом уровне шума и увеличивает точность распознавания слов с 10 до 60%. Определенный успех достигается и при полном выключении звука, но всё-таки даже минимальный аудиосигнал значительно повышал процент узнавания.

Ученые считают, что из двух сигналов (аудио- и видео-) наш мозг выбирает тот, которому можно больше доверять, при этом второй может как помогать, так и мешать принятию решения. Так, если на видеоролике персонаж произносил одно слово, а на звуковой дорожке – другое, то испытуемые часто вообще называли третье, а если персонаж просто открывал рот во время проигрывания записи, то точность угадывания повышалась.

Новости и материалы
В Белом доме анонсировали встречи США и Дании по Гренландии каждые две-три недели
«Долго это не продержится»: Тарасова о возможных реформах ISU
Белый дом рассказал о встрече Вэнса и Рубио с главами МИД Дании и Гренландии
Кейт Миддлтон с новым цветом волос возглавила первый прием 2026 года
Курянка тушила о голову дочери сигареты, наказывая за непослушание
Зеленский сообщил о последствиях удара по Харькову
Экс-тренер сборной России заявил, что у него большие ожидания от работы Карседо в «Спартаке»
Во Франции призвали закончить «позорный фарс» со спонсированием Украины
Белый дом назвал губернатора Миннесоты «тампоном»
Ученик Тутберидзе лидировал в КП на чемпионате Европы
В Госдуме усомнились, что 30 европейских солдат смогут защитить Гренландию от США
В Госдуме не согласились, со словами Мерца о том, что Россия – европейская страна
Верховный суд ФРГ сообщил, что теракт на «Северных потоках» совершил офицер ВСУ
Россиянка сфотографировала знакомого без одежды и пошла под суд
«Нужны лидеры на поле»: тренер ЦСКА объяснил, зачем клуб подписал игрока «Локомотива»
В Белом доме высказались о продолжении сотрудничества с Венесуэлой
Евросоюз начал работать над новой стратегией безопасности
Ксения Собчак показала фото с Оксаной Самойловой в Куршавеле
Все новости
Продажи важного ветпрепарата могут ограничить из-за дурного увлечения зумеров. Что происходит
Теперь вы знаете