• Добавить в закладки
  • Facebook
  • Twitter
  • Telegram
  • VK
  • Печать
  • Email
  • Скопировать ссылку
29.01.2021
Мария Кривоченко
1 600

Жестикуляция повлияла на наше восприятие звуков

2.5

Команда исследователей выяснила, что движения руками не только акцентируют внимание слушателей на словах говорящего, но и влияют на восприятие звуков. Так, взмахи в определенный момент речи заставляют людей слышать звуки более долгими или воспринимать их как ударные.

Кадр из фильма «Железная леди»
Кадр из фильма «Железная леди» / Автор: Milonia Larcius

Ученые из Института психолингвистики имени Макса Планка и Тилбургского университета проверили, могут ли визуальные сигналы повлиять на наше восприятие звуков. Чтобы исследовать этот вопрос, специалисты отобрали несколько голландских слов, которые отличались только ударением. Например, слово «Plato» с ударением на первый слог — это имя древнегреческого философа Платона. А с ударением на второй — плато.

Затем ученые отобрали группу мужчин и женщин среднего возраста. Им показали видео, где один из авторов исследования произносит омографы, параллельно делая ритмичные жесты рукой. После респондентам предложили выбрать, какое слово произнес ученый, опираясь на произношение, а не на жесты.

Оказалось, слушатели чаще воспринимали слог как ударный, если на нем акцентировали внимание жестов. Этот эффект сохранялся, даже если ученый произносил не слово, а набор букв: «BAAGpif» или «baagPIF». Кроме того, выяснилось, что жесты влияли и на длину гласной: так, в первом случае участники услышали долгое «а» в слове «baagpif», а во втором — короткое. Результаты и подробности эксперимента команда опубликовала в журнале Proceedings of the Royal Society B.

«Люди слушают не только ушами, но и глазами, — рассказал Харт Рутгер Боскер, автор работы. — Эти результаты впервые показывают, что жесты влияют на то, какие звуки мы слышим». Исследователи считают, что эффект может быть более сильным в обычной жизни, когда речь, как правило, менее понятна, чем во время эксперимента в лаборатории. Так что в условиях шума жесты могут оказаться полезными.

Кроме того, результаты опытов имеют значение во взаимодействии человека и компьютера — для улучшения систем распознавания речи. «Кажется очевидным, что такие системы должны учитывать больше, чем просто речь», — заключил Боскер.

Ученые собираются продолжить исследования, используя технологию виртуальной реальности. Они хотят проверить, насколько специфичны эти эффекты, влияют ли на восприятие звуков только жесты или можно воздействовать на слушателей и другими визуальными сигналами, например кивками головы или движением бровей.

Нашли опечатку? Выделите фрагмент и нажмите Ctrl + Enter.
Подписывайтесь на нас в Telegram, Яндекс.Новостях и VK
Предстоящие мероприятия
Вчера, 09:42
ТюмГУ

Специалисты Школы компьютерных наук ТюмГУ разработали программное обеспечение для многофакторной аутентификации с использованием нескольких биометрических методов проверки данных в операционных системах на базе ядра Linux. Программный продукт способен распознавать пользователя по голосу и по видеоизображению.

28 мая
ПНИПУ

Российские города уже атакуют вездесущие воздушные хлопья, которые буквально заполняют улицы, парки и дворы, становясь причиной дискомфорта и обострения аллергических реакций у многих людей. Эксперты Пермского Политеха рассказали, для чего тополю пушистые семена, почему в одни годы их много, а в другие — мало, почему июньский «снег» вызывает конъюнктивит и ринит, как пережить этот период астматикам, почему важно очищать кондиционеры вовремя и как безобидные пушинки могут заставить автовладельцев распрощаться с деньгами.

Вчера, 17:49
Адель Романенкова

Красный сверхгигант Бетельгейзе в созвездии Ориона больше всего известен признаками «скорого» взрыва сверхновой, но недавно к этому добавились новые подозрения: о том, что она может быть двойной. Теперь астрономы пытаются выяснить, что представляет собой ее напарник. Недавние наблюдения привели к выводу, что это явно не белый карлик и не нейтронная звезда. Предполагают, что на самом деле это протозвезда.

26 мая
Unitsky String Technologies Inc.

Казахстанский Алматы — город контрастов, где горы соседствуют с урбанистическими пейзажами, а бизнес-центры — с историческими кварталами. Неизменным остается одно — пробки. Ежедневно сюда приезжает более 700 тысяч автомобилей из пригородов, при этом в самом мегаполисе зарегистрировано порядка 600 тысяч транспортных средств. В результате по улицам ежедневно движется более миллиона транспортных средств.

27 мая
НИУ ВШЭ

Исследователи ВШЭ выделили более 4000 примеров устной русской речи билингвов из семи регионов России и выяснили: большинство нестандартных форм в конструкциях с числительными связано не только с их родным языком, но и с тем, как часто выражение встречается в повседневной речи. Например, фразы «два часа» или «пять километров» почти всегда совпадают с литературным вариантом, а вот менее привычные выражения, особенно с числительными от двух до четырех, а также с собирательными формами вроде «двое» или «трое», часто звучат иначе.

27 мая
Любовь Соковикова

Хотя попытки объединить квантовую теорию и гравитацию десятилетиями терпели неудачу, ученые продолжают выдвигать новые, порой крайне спорные гипотезы. Авторы нового исследования, например, предложили посмотреть на гравитацию так же, как на другие фундаментальные силы природы — через симметрии и поля.

6 мая
Редакция Naked Science

Да, с волосами и люком все так. У космонавта Суниты Уильямс волосы на МКС плавали свободно, а у Кэти Пэрри и прочих в полете 14 апреля 2025 года — нет. Но это не значит, что суборбитального космического полета первого чисто женского экипажа не было или что он был инсценировкой. Причем, в общем-то, чтобы понять это, даже не нужно обладать специальными знаниями.

22 мая
ПНИПУ

Недавно вышел второй сезон сериала «Одни из нас» (TheLastofUs), созданного по сюжету популярнейшей видеоигры. Ученые Пермского Политеха решили разобраться, насколько реален сценарий грибной пандемии, превращающей людей зомби? Чем живет кордицепс и как он «ищет» своих жертв, действительно ли паразит способен эволюционировать настолько, чтобы поражать человеческий организм и подчинять себе его волю, был бы у людей шанс выжить, какие грибы уже поселились в наших телах и выручит ли нас иммунитет, сформированный тысячелетиями.

6 мая
Александр Березин

Мощнейшее отключение электроэнергии за последние 20 лет истории Европы случилось уже неделю назад, а испанские власти пока так и не объявили о его причинах. Это логично: как мы покажем ниже, ответ на вопрос, кто виноват, получится очень неполиткорректным. И, более того, противоречащим линии правящей в Испании партии. Но мы живем за тысячи километров от нее, поэтому можем себе позволить аполитичный анализ случившегося. Так что же произошло на самом деле и каковы наши шансы увидеть подобное у себя дома?

[miniorange_social_login]

Комментарии

Написать комментарий
Подтвердить?
Подтвердить?
Причина отклонения
Подтвердить?
Не получилось опубликовать!

Вы попытались написать запрещенную фразу или вас забанили за частые нарушения.

Понятно
Жалоба отправлена

Мы обязательно проверим комментарий и
при необходимости примем меры.

Спасибо
Аккаунт заблокирован!

Из-за нарушений правил сайта на ваш аккаунт были наложены ограничения. Если это ошибка, напишите нам.

Понятно
Что-то пошло не так!

Наши фильтры обнаружили в ваших действиях признаки накрутки. Отдохните немного и вернитесь к нам позже.

Понятно
Лучшие материалы
Закрыть
Войти
Регистрируясь, вы соглашаетесь с правилами использования сайта и даете согласие на обработку персональных данных.
Ваша заявка получена

Мы скоро изучим заявку и свяжемся с Вами по указанной почте в случае положительного исхода. Спасибо за интерес к проекту.

Понятно
Ваше сообщение получено

Мы скоро прочитаем его и свяжемся с Вами по указанной почте. Спасибо за интерес к проекту.

Понятно