När vi pratar ansikte mot ansikte utbyter vi många fler signaler än bara ord. Vi kommunicerar med vår kroppshållning, ansiktsuttryck och huvud- och ögonrörelser; men också genom de rytmer som produceras när någon pratar. Ett bra exempel är den hastighet med vilken vi producerar stavelser i kontinuerligt tal – ca tre till sju gånger i sekunden. I ett samtal, en lyssnare stämmer in till denna rytm och använder den för att förutsäga timingen för de stavelser som talaren kommer att använda härnäst. Det gör det lättare för dem att följa vad som sägs.

Många andra saker är också på gång. Använder sig av hjärnavbildningstekniker vi vet till exempel att även när ingen pratar, är den del av vår hjärna som ansvarar för hörseln producerar rytmisk aktivitet i samma takt som stavelserna i tal. När vi lyssnar på någon som pratar, dessa hjärnans rytmer anpassas till stavelsestrukturen. Som ett resultat matchar hjärnrytmerna och spårar den inkommande akustiska talsignalen i frekvens och tid.

När någon pratar vet vi att deras läpprörelser hjälper lyssnaren också. Ofta föregår dessa rörelser talet – öppnar till exempel munnen – och ger viktiga signaler om vad personen kommer att säga. Men även på egen hand innehåller läpprörelser tillräckligt med information för att tränade observatörer ska kunna förstå tal utan att höra några ord – därför kan vissa människor förstås läppläsa.

Det som hittills varit oklart är hur dessa rörelser bearbetas i lyssnarens hjärna.

Läppsynkronisering

Detta var vårt ämne senaste studien. Vi redan visste det det är inte bara en talares stämband som producerar en stavelserytm, utan också deras läpprörelser. Vi ville se om lyssnarnas hjärnvågor anpassar sig till högtalarnas läpprörelser under kontinuerligt tal på ett jämförbart sätt med hur de anpassar sig till själva akustiska talet – och om detta var viktigt för att förstå tal.

Vår studie har för första gången visat att så är fallet. Vi registrerade hjärnaktiviteten hos 44 friska frivilliga medan de tittade på filmer av någon som berättar en historia. Precis som den auditiva delen av hjärnan fann vi att den visuella delen också producerar rytmer. Dessa anpassar sig till stavelserytmen som produceras av talarens läppar under kontinuerligt tal. Och när vi försvårade lyssningsförhållandena genom att lägga till distraherande tal, vilket gjorde att berättarens läpprörelser blev viktigare för att förstå vad de sa, blev anpassningen mellan de två rytmerna mer exakt.

Dessutom fann vi att de delar av lyssnarens hjärna som styr läpprörelser också producerar hjärnvågor som är anpassade till läpprörelserna hos talaren. Och när dessa vågor är bättre anpassade till vågorna från den motoriska delen av talarens hjärna, förstår lyssnaren talet bättre.

Detta stöder tanken att hjärnområden som används för att producera tal är också viktiga för att förstå tal, och kan ha implikationer för att studera läppläsning mellan personer med hörsvårigheter. Efter att ha visat detta i förhållande till en talare och lyssnare blir nästa steg att titta på om samma sak händer med hjärnans rytmer under ett tvåvägssamtal.

Varför är dessa insikter intressanta? Om det är korrekt att tal normalt fungerar genom att etablera en kanal för kommunikation genom att anpassa hjärnrytmer till talrytmer – liknande att ställa in en radio till en viss frekvens för att lyssna på en viss station – tyder våra resultat på att det finns andra kompletterande kanaler som kan ta över när det behövs. Inte bara kan vi stämma oss själva till rytmerna från någons stämband, vi kan stämma in på motsvarande rytmer från deras läpprörelser. Istället för att göra detta med den auditiva delen av vår hjärna, gör vi det genom de delar som är förknippade med se och rörelse.

Och du behöver inte heller vara en utbildad läppläsare för att dra nytta av det – det är därför även i en bullrig miljö som en pub eller fest kan de flesta fortfarande kommunicera med varandra.

Om Författarna

Joachim Gross, professor i psykologi, University of Glasgow. Hans grupp undersöker den funktionella rollen av hjärnoscillationer med hjälp av neuroimaging och beräkningsmetoder. Hans huvudsakliga mål är att förstå hur hjärnoscillationer stöder perception och handling.

Hyojin Park, forskningsassistent, University of Glasgow. Hennes nuvarande forskning är att förstå kodning och avkodning av neurala svängningar i samband med talbehandling med hjälp av hjärnavbildningstekniker som är optimalt utformade för att fånga temporal dynamik i den mänskliga hjärnan.

Den här artikeln publicerades ursprungligen den Avlyssningen. Läs ursprungliga artikeln.

relaterade böcker

at InnerSelf Market och Amazon