• Добавить в закладки
  • Facebook
  • Twitter
  • Telegram
  • VK
  • Печать
  • Email
  • Скопировать ссылку
29.01.2021, 17:03
Мария Кривоченко
1 602

Жестикуляция повлияла на наше восприятие звуков

❋ 2.5

Команда исследователей выяснила, что движения руками не только акцентируют внимание слушателей на словах говорящего, но и влияют на восприятие звуков. Так, взмахи в определенный момент речи заставляют людей слышать звуки более долгими или воспринимать их как ударные.

Кадр из фильма «Железная леди»
Кадр из фильма «Железная леди» / Автор: Milonia Larcius

Ученые из Института психолингвистики имени Макса Планка и Тилбургского университета проверили, могут ли визуальные сигналы повлиять на наше восприятие звуков. Чтобы исследовать этот вопрос, специалисты отобрали несколько голландских слов, которые отличались только ударением. Например, слово «Plato» с ударением на первый слог — это имя древнегреческого философа Платона. А с ударением на второй — плато.

Затем ученые отобрали группу мужчин и женщин среднего возраста. Им показали видео, где один из авторов исследования произносит омографы, параллельно делая ритмичные жесты рукой. После респондентам предложили выбрать, какое слово произнес ученый, опираясь на произношение, а не на жесты.

Оказалось, слушатели чаще воспринимали слог как ударный, если на нем акцентировали внимание жестов. Этот эффект сохранялся, даже если ученый произносил не слово, а набор букв: «BAAGpif» или «baagPIF». Кроме того, выяснилось, что жесты влияли и на длину гласной: так, в первом случае участники услышали долгое «а» в слове «baagpif», а во втором — короткое. Результаты и подробности эксперимента команда опубликовала в журнале Proceedings of the Royal Society B.

«Люди слушают не только ушами, но и глазами, — рассказал Харт Рутгер Боскер, автор работы. — Эти результаты впервые показывают, что жесты влияют на то, какие звуки мы слышим». Исследователи считают, что эффект может быть более сильным в обычной жизни, когда речь, как правило, менее понятна, чем во время эксперимента в лаборатории. Так что в условиях шума жесты могут оказаться полезными.

Кроме того, результаты опытов имеют значение во взаимодействии человека и компьютера — для улучшения систем распознавания речи. «Кажется очевидным, что такие системы должны учитывать больше, чем просто речь», — заключил Боскер.

Ученые собираются продолжить исследования, используя технологию виртуальной реальности. Они хотят проверить, насколько специфичны эти эффекты, влияют ли на восприятие звуков только жесты или можно воздействовать на слушателей и другими визуальными сигналами, например кивками головы или движением бровей.

Нашли опечатку? Выделите фрагмент и нажмите Ctrl + Enter.
Подписывайтесь на нас в Telegram, Яндекс.Новостях и VK
Предстоящие мероприятия
18 августа, 11:11
Денис Яковлев

За последнее десятилетие ученые создали несколько сложных систем «мозг — компьютер», которые позволяли преобразовывать мозговую активность людей, лишившихся способности говорить из-за различных заболеваний, в речь. Однако до сих пор удавалось расшифровать лишь небольшое количество слов. Теперь в США создали алгоритм, благодаря которому удалось распознать до 54 процентов «речи».

19 августа, 15:54
Елена Авдеева

К любопытным выводам привели наблюдения японских ученых за пестролицыми буревестниками. Оказалось, эти птицы испражняются в основном на лету, намеренно избегая такой возможности на поверхности воды. Очевидно, предположили исследователи, это облегчает движения в воздухе взрослым особям с добычей во рту.

19 августа, 10:44
Адель Романова

Ученые заново просмотрели старые записи о наблюдениях с помощью телескопа «Большое Ухо», который поймал знаменитый радиосигнал Wow!, и обнаружили данные о еще двух похожих событиях. Астрономы пришли к выводу, что это не могли быть обыкновенные земные радиопомехи и во всех трех случаях источник действительно располагался в глубоком космосе.

16 августа, 19:09
Адель Романова

Астрономы подсчитали, что с поверхности летящего по Солнечной системе межзвездного объекта 3I/ATLAS каждую секунду испаряется около 40 килограммов водяного льда. Такую сильную кометную активность он проявил, будучи в три с половиной раза дальше Земли от Солнца. По мнению ученых, это довольно необычно.

18 августа, 11:11
Денис Яковлев

За последнее десятилетие ученые создали несколько сложных систем «мозг — компьютер», которые позволяли преобразовывать мозговую активность людей, лишившихся способности говорить из-за различных заболеваний, в речь. Однако до сих пор удавалось расшифровать лишь небольшое количество слов. Теперь в США создали алгоритм, благодаря которому удалось распознать до 54 процентов «речи».

15 августа, 08:25
Любовь С.

Изображение блазара PKS 1424+240, полученное с помощью радиоинтерферометра VLBA, напомнило астрономам легендарное «Око Саурона» из «Властелина колец» — джет, пронизывающий кольцеобразное магнитное поле объекта, устремлен к нашей планете, а сам блазар может оказаться одним из наиболее ярких источников нейтрино в космосе.

25 июля, 07:47
Адель Романова

Прибывшая из межзвездного пространства предполагаемая комета 3I/ATLAS движется по траектории, максимально удобной для гравитационных маневров управляемого корабля, при этом возможность ее отслеживания с Земли практически минимальна. По мнению некоторых ученых, такое «поведение» объекта наводит на определенные мысли.

6 августа, 20:59
Татьяна Пичугина

Примерно 12 800 лет назад в Северном полушарии началось резкое изменение климата, которое сопровождалось вымиранием мегафауны и угасанием культуры Кловис. Такое могло произойти, например, из-за прорыва пресных вод в Атлантику или мощного вулканического извержения. Несколько лет назад ученые обнаружили места на суше с повышенным содержанием элементов платиновой группы, прослоями угля, микрочастицами расплава. По их мнению, это может быть признаком пребывания Земли в потоке обломков кометы или астероида. В новой работе впервые представлены доказательства кометного события в позднем дриасе из морских осадочных толщ.

22 июля, 14:44
ФизТех

Команда исследователей из Сколтеха, МФТИ, Института искусственного интеллекта AIRI и других научных центров разработала метод, позволяющий не просто отличать тексты, написанные человеком, от сгенерированных нейросетью, но и понимать, по каким именно признакам классификатор принимает решение о том, является ли текст генерацией или нет.  Анализируя внутренние состояния глубоких слоев языковой модели, ученые смогли выделить и интерпретировать численные признаки, отвечающие за стилистику, сложность и «степень уверенности» текста.

[miniorange_social_login]

Комментарии

Написать комментарий
Подтвердить?
Подтвердить?
Причина отклонения
Подтвердить?
Не получилось опубликовать!

Вы попытались написать запрещенную фразу или вас забанили за частые нарушения.

Понятно
Жалоба отправлена

Мы обязательно проверим комментарий и
при необходимости примем меры.

Спасибо
Аккаунт заблокирован!

Из-за нарушений правил сайта на ваш аккаунт были наложены ограничения. Если это ошибка, напишите нам.

Понятно
Что-то пошло не так!

Наши фильтры обнаружили в ваших действиях признаки накрутки. Отдохните немного и вернитесь к нам позже.

Понятно
Лучшие материалы
Закрыть
Войти
Регистрируясь, вы соглашаетесь с правилами использования сайта и даете согласие на обработку персональных данных.
Ваша заявка получена

Мы скоро изучим заявку и свяжемся с Вами по указанной почте в случае положительного исхода. Спасибо за интерес к проекту.

Понятно