McGurk-effekten: Hør med øjnene
Du har utvivlsomt set dårligt synkroniserede film, hvor du forsøger at læse skuespillernes læber for at finde ud af, hvad de siger. Pludselig oplever du, at du “lytter med øjnene”. Med andre ord afkoder du lyde gennem en anden kanal end den auditive. Dette fænomen, når der er et misforhold mellem lyd- og visuelle signaler, kaldes McGurk-effekten.
Selv om denne form for oplevelse nogle gange fører til, at man begår nogle fejl, er det også en ekstremt vigtig strategi i hjernen. Når man f.eks. er til en fest med meget høj musik og forsøger at føre en samtale med nogen, ser man på deres mund for at forsøge at “læse” deres ord.
Dette viser noget vigtigt. Det er det faktum, at vi ikke bruger hver af vores sanser separat. Faktisk sker alle perceptuelle oplevelser i virkeligheden som et resultat af samspillet mellem mere end én sans. Synet og hørelsen arbejder her sammen, så selv om der nogle gange kan opstå små fejl, er de vores bedste allierede.
Mennesker med Alzheimers sygdom oplever ofte forstyrrelser af McGurk-effekten. De kan ikke identificere lyde og ord visuelt.
Hvad er McGurk-effekten?
En stor del af dine kommunikationsprocesser finder sted i situationer, hvor du kan høre den anden person tydeligt. I den seneste tid i kølvandet på stigningen i videoopkald har du dog en tendens til at opleve McGurk-effekten oftere.
Nogle gange hører du f.eks. ikke den anden person særlig godt på grund af dårlige forbindelser. Så skifter du fra din auditive kanal til din visuelle kanal for at forsøge at læse deres læber. Dette er dog ikke let. Faktisk begår man nogle gange fejl, selv med personens ansigt og mund som referencepunkt.
Kognitionspsykologerne Harry McGurk og John MacDonald undersøgte dette fænomen i 1970’erne. Faktisk var det i deres artikel, At høre læber og se stemmer i 1976, at de først opfandt udtrykket McGurk-effekten.
De gjorde det efter at have kontrolleret noget meget specifikt i et berømt eksperiment. Det er noget, der havde været bevist i årtier, og som aldrig havde fejlet. Det faktum, at hvis nogen bevæger læberne og udtaler stavelsen “ga”, men det lytteren hører er stavelsen “ba”, vil deres hjerne opfatte det som “da”. Med andre ord er det, øjnene læser, nogle gange ikke det samme som det, ørerne opfatter.
Hvorfor opstår McGurk-effekten?
Du ved allerede, at McGurk-effekten opstår, når du forsøger at “læse” med øjnene, og det, du ser (læbernes bevægelse), ikke stemmer overens med den faktiske lyd. Det hjerneområde, hvor dette fænomen opstår, er i den dybe fure øverst i temporalap (superior temporal sulcus). Når man forsøger at afkode to sensoriske modaliteter (syn og lyd), er det almindeligt, at der opstår fejl.
Neurokirurgisk afdeling på Houston Medical College (Texas) gennemførte en undersøgelse, hvor de påpegede, at når man har en samtale ansigt til ansigt, lytter hjernen gennem øret og afkoder også ord med øjnene. Det gør man ubevidst.
Ved at være opmærksom på læbernes bevægelser kan man styrke kommunikationen i tilfælde af vanskeligheder, f.eks. støj fra omgivelserne. Der er dog lyde og stavelser, som ofte fejlfortolkes. Der opstår små slutninger og fejl.
Nogle mennesker lider i højere grad under denne oplevelse
Som nævnt har mennesker med Alzheimers sygdom en tendens til at være alvorligt ramt af McGurk-effekten. Hvis de på et tidspunkt skal læse på læberne for at forstå et budskab, vil de nemlig ikke være i stand til at afkode det.
I 2007 gennemførte Delbeuck, Collette og Van der Linden forskning, der tyder på, at årsagen til dette kan være forringelse af hjernens konnektivitet.
På samme måde er det blevet observeret, at børn med ekspressiv sprogforstyrrelse ikke er opmærksomme på ords artikulation. Faktisk bruger de ikke den visuelle kanal til at imitere eller forstå det, der udtrykkes til dem. Dette hæmmer udviklingen af selve sproget.
Det visuelle system hjælper dig med at skelne lyde
McGurk-effekten opstår, når du læser andre menneskers læber og forveksler nogle stavelser eller ord. Det er noget helt normalt såvel som interessant. Den viser, at vi som mennesker altid bruger vores visuelle system under kommunikation. Det er ikke noget, som kun mennesker med hørenedsættelse gør.
Din hjerne skal sørge for, at kommunikationsprocessen foregår effektivt. For at gøre det drejer det sig ikke kun om at lytte, det drejer sig også om synet.
At se på din samtalepartner på munden letter forståelsen i enhver sammenhæng. Dette forklarer vigtigheden af personlige samtaler. Faktisk er det at læse med øjnene endnu en menneskelig færdighed, som vi bør være stolte af.
Alle citerede kilder blev grundigt gennemgået af vores team for at sikre deres kvalitet, pålidelighed, aktualitet og validitet. Bibliografien i denne artikel blev betragtet som pålidelig og af akademisk eller videnskabelig nøjagtighed.
- Alsius, A., Navarra, J., & Soto-Faraco, S. (2007). Attention to touch weakens audiovisual speech integration. Experimental Brain Research, 183(3), 399-404.
- Baynes, K., Funnell, M. G., & Fowler, C. A. (1994). Hemispheric contributions to the integration of visual and auditory information in speech perception. Perception & Psychophysics, 55(6), 633-641.
- Delbeuck, X., Collette, F., & Van der Linden, M. (2007). Is Alzheimer’s disease a disconnection syndrome?: Evidence from a crossmodal audio-visual illusory experiment. Neuropsychologia, 45(14), 3315-3323.
- Tiippana K. (2014). What is the McGurk effect?. Frontiers in psychology, 5, 725. https://doi.org/10.3389/fpsyg.2014.00725
- McGurk, H., & MacDonald, J. (1976). Hearing lips and seeing voices. Nature, 264(5588), 746-748.
- Nath, A. R., & Beauchamp, M. S. (2012). A neural basis for interindividual differences in the McGurk effect, a multisensory speech illusion. Neuroimage, 59(1), 781-787.