Коли ми розмовляємо віч-на-віч, ми обмінюємося набагато більшою кількістю сигналів, ніж просто словами. Ми спілкуємось, використовуючи поставу тіла, міміку та рухи голови та очей; але також через ритми, які виробляються, коли хтось говорить. Хороший приклад - швидкість, з якою ми створюємо склади в безперервному мовленні - о три -сім разів на секунду. У розмові слухач налаштовується до цього ритму і використовує його для прогнозування часу складів, які оратор буде використовувати далі. Це полегшує їм стеження за сказаним.

Також відбувається багато інших речей. Використання методи візуалізації мозку ми знаємо, наприклад, що навіть коли ніхто не говорить, частина нашого мозку відповідає за слух випускає ритмічна діяльність з подібною швидкістю до складів у мовленні. Коли ми слухаємо, як хтось говорить, це мозкові ритми вирівнюються до структури складів. В результаті ритми мозку збігаються і відстежують частоту і час вхідного звукового мовного сигналу.

Коли хтось говорить, ми знаємо, що його рухи губ також допомагають слухачеві. Часто ці рухи передують мовленню - наприклад, відкриваючи рот - і дають важливі підказки про те, що людина скаже. Проте навіть самі по собі рухи губ містять достатньо інформації, щоб дозволити навченим спостерігачам розуміти мову, не чуючи жодних слів-отже, деякі люди, звичайно, можуть читати по губах.

Незрозумілим досі є те, як ці рухи обробляються в мозку слухача.

Синхронізація губ

Це була тема нашого останнє дослідження. Ми вже знав це не тільки голосові зв’язки оратора створюють ритм складів, а й рухи губ. Ми хотіли побачити, чи співпадають мозкові хвилі слухачів з рухами губ ораторів під час безперервної мови у порівнянні з тим, як вони співпадають із самою акустичною промовою - і чи це важливо для розуміння мови.

Наше дослідження вперше показало, що це справді так. Ми записали активність мозку 44 здорових добровольців, коли вони дивилися фільми, де хтось розповідає історію. Так само, як і слухова частина мозку, ми виявили, що зорова частина також виробляє ритми. Вони вирівнюються за ритмом складів, який виробляється губами оратора під час безперервної промови. І коли ми ускладнили умови прослуховування, додавши відволікаючу промову, а це означало, що рухи губ оповідача стають важливішими для розуміння того, що вони говорять, вирівнювання між цими двома ритмами стало більш точним.

Крім того, ми виявили, що частини мозку слухача, які контролюють рухи губ, також виробляють мозкові хвилі, які вирівнюються з рухами губ оратора. І коли ці хвилі краще вирівнюються до хвиль з рухової частини мозку оратора, слухач краще розуміє промову.

Це підтримує ідея, що ділянки мозку, які використовуються для виробництва мовлення, також важливі для розуміння мови і можуть мати вплив на вивчення читання губ між людьми з вадами слуху. Продемонструвавши це стосовно спікера та слухача, наступним кроком буде перевірка того, чи відбувається те ж саме з ритмами мозку під час двосторонньої розмови.

Чому ці знахідки цікаві? Якщо правильно, що мова нормально працює шляхом встановлення каналу для спілкування шляхом вирівнювання мозкових ритмів до мовленнєвих ритмів - подібно налаштуванню радіо на певну частоту для прослуховування певної станції - наші результати показують, що існують інші додаткові канали, які можуть приймати закінчити, коли буде потрібно. Ми не тільки можемо налаштувати себе на ритми чиїсь голосові зв’язки, але й на еквівалентні ритми з їх руху губ. Замість того, щоб робити це зі слуховою частиною нашого мозку, ми робимо це через частини, пов'язані з баченням і рухом.

І також не потрібно бути навченим читачем губ, щоб отримати користь-ось чому навіть у галасливому середовищі, такому як паб чи вечірка, більшість людей все ще можуть спілкуватися один з одним.

Про авторів

Йоахім Гросс, професор психології Університету Глазго. Його група досліджує функціональну роль коливань мозку за допомогою нейровізуалізації та обчислювальних методів. Його головна мета - зрозуміти, як коливання мозку підтримують сприйняття та дії.

Hyojin Park, науковий співробітник, Університет Глазго. Її поточне дослідження полягає в тому, щоб зрозуміти кодування та декодування нейронних коливань у контексті обробки мови з використанням методів візуалізації мозку, оптимально розроблених для фіксації часової динаміки в людському мозку.

Ця стаття була спочатку опублікована на Бесіда. Читати оригінал статті.

Суміжні книги

at InnerSelf Market і Amazon