Когда в фильме герои разговаривают под музыку, зритель слышит и реплики, и мелодию. Ученые из Канады и Франции выяснили, какие свойства звука помогают мозгу различать их. Для распознавания речи важнее быстрые изменения звука во времени, а для музыки — то, как он распределяется по частотам. О том, зачем исследователям понадобились первые минуты «Гарри Поттера» и что показали записи активности мозга, — в материале «Известий».
Зачем ученым понадобился «Гарри Поттер»
Для эксперимента взяли почти восемь минут звуковой дорожки фильма «Гарри Поттер и философский камень» во французском дубляже. На записи речь и музыка звучали по отдельности и одновременно. В более ранних работах ученые часто использовали короткие изолированные звуки. Фрагмент фильма позволил проверить, сохраняются ли выявленные закономерности, когда звуки накладываются друг на друга и их сочетание постоянно меняется.
Один и тот же отрывок включили двум группам. В первой были 19 здоровых взрослых. Они нажимали кнопки, отмечая, в какие моменты слышат речь, музыку или и то и другое. Во второй — 11 пациентов с эпилепсией, которым ранее установили внутричерепные электроды для обследования. Они слушали запись без дополнительных заданий, а ученые регистрировали активность их мозга. Так исследователи смогли сопоставить то, что услышала одна группа, с тем, как на ту же запись реагировала слуховая кора другой.
Что выдает речь и музыку
У звука есть рисунок во времени и по частотам. В разговоре быстро сменяются слоги, короткие всплески звука перемежаются паузами. Когда звучит несколько нот, их сочетание дает другой ориентир — характерное распределение энергии между низкими и высокими частотами. Изменения сигнала во времени и по частотам ученые называют спектрально-временными модуляциями. Анализ показал, что при распознавании речи больше информации давали быстрые изменения во времени, а при распознавании музыки — детали частотного рисунка.
Память любит паузы: ученые раскрыли пользу спокойного отдыха
В слуховых областях обоих полушарий ученые выделили 39 точек, где активность мозга устойчиво менялась вслед за этими акустическими признаками. По записям с электродов компьютерные модели восстанавливали признаки звуковой дорожки. Затем исследователи проверяли, можно ли по ним предсказать, когда слушатели из другой группы нажимали кнопку, отмечая речь или музыку.
По данным отдельных точек записи модели предсказывали отметки о наличии речи с точностью 54–60%, а музыки — 54–71%. В обоих случаях показатели превысили порог случайного угадывания в 50%. При анализе акустических признаков непосредственно из звуковой дорожки точность достигала 97–99% для речи и 99–100% для музыки.
Закономерность проверили и на другой записи. Пяти участникам дали прослушать специально составленную смесь речи и органной музыки. В этой записи исследователи заранее знали, где звучал каждый компонент. Анализ дал сходный результат — для распознавания речи снова оказались важнее изменения во времени, а для музыки — особенности ее частотного состава.
Как полушария обрабатывают звук
С изменениями звука во времени были сильнее всего связаны быстрые колебания активности мозга в гамма-диапазоне. За частотными деталями лучше следовали более медленные колебания в альфа-диапазоне. В обработке речи и музыки участвовали оба полушария. При этом активность слуховых участков слева точнее следовала за акустическими особенностями речи, а справа — за особенностями музыки.
Ученые объяснили влияние музыки на мозг при зависимостях
Похожую асимметрию некоторые из авторов наблюдали еще в 2020 году. Тогда они записали пропетые фразы на английском и французском языках и обработали записи двумя способами. Когда из звука убирали часть информации о его изменениях во времени, участникам было труднее различить слова. Когда убирали часть частотных деталей, хуже распознавалась мелодия. В той работе активность мозга измеряли с помощью функциональной МРТ. Эксперимент с фильмом позволил проследить похожую закономерность по сигналам с электродов, пока реплики и музыка сменяли друг друга или звучали вместе.
Как мозг воспринимает пение
Результаты эксперимента показывают, что различие между речью и музыкальным сопровождением можно уловить уже по тому, как слуховая кора регистрирует свойства звука.
«Сами акустические характеристики уже содержат информацию, необходимую для такого различения», — пишут авторы.
Какую роль в этом процессе играют участки мозга, избирательно реагирующие на отдельные типы звуков, остается открытым вопросом. Один из примеров такой избирательности обнаружили в 2022 году. Исследователи описали в слуховой коре группу нейронов, которая сильно реагировала на пение и гораздо слабее — на обычную речь или инструментальную музыку. В новом эксперименте ученые решали другую задачу. Им удалось показать, по каким признакам мозг различает два звука, когда голос и музыка слышны одновременно и каждый сохраняет свой акустический рисунок.

Комментарии 0