McGurk-effekten, å høre med øynene
Du har utvilsomt sett dårlig dubbede filmer der du prøver å lese skuespillernes lepper for å finne ut hva de sier. Plutselig begynner du å “høre med øynene”. Med andre ord, du dechiffrerer lyder gjennom en annen kanal enn den auditive. Dette fenomenet, når det er et misforhold mellom lyd og visuelle signaler, er kjent som McGurk-effekten.
Selv om denne typen opplevelse noen ganger fører til at du gjør noen feil, er det også en ekstremt viktig strategi for hjernen. For eksempel, når du er på en fest med veldig høy musikk og prøver å ha en samtale med noen, ser du på munnen deres for å prøve å “lese” ordene deres.
Dette viser noe viktig. Det er det faktum at vi ikke bruker hver av sansene våre separat. I virkeligheten skjer alle perseptuelle opplevelser som et resultat av samspillet mellom mer enn én sans. Syn og hørsel fungerer sammen her, så selv om det noen ganger kan oppstå små feil, er de våre beste allierte.
Personer med Alzheimers sykdom opplever ofte forstyrrelser av McGurk-effekten. De kan ikke identifisere lyder og ord visuelt.
Hva er McGurk-effekten?
Mye av kommunikasjonsprosessene dine skjer i situasjoner der du kan høre den andre personen tydelig. Men i nyere tid i kjølvannet av økningen i videosamtaler, har du en tendens til å oppleve McGurk-effekten oftere.
For eksempel, noen ganger, på grunn av dårlige forbindelser, hører du ikke den andre personen så godt. Deretter bytter du fra din auditive kanal til din visuelle for å prøve å lese på leppene deres. Dette er imidlertid ikke lett. Noen ganger, selv med personens ansikt og munn som referansepunkt, gjør du feil.
De kognitive psykologene, Harry McGurk og John MacDonald studerte dette fenomenet på 1970-tallet. Faktisk var det i artikkelen deres, Hearing Lips and Seeing Voices i 1976, at de først laget begrepet McGurk-effekten.
De gjorde det etter å ha sjekket noe veldig spesifikt i et kjent eksperiment. Det er noe som hadde vært bevist i flere tiår og som aldri hadde feilet. Det faktum at hvis noen beveger leppene og uttaler stavelsen “ga”, men det lytteren hører er stavelsen “ba”, vil hjernen deres oppfatte det som “da”. Med andre ord, noen ganger er det øynene leser ikke det samme som det ørene oppfatter.
Hvorfor oppstår McGurk-effekten?
Du vet allerede at McGurk-effekten oppstår når du prøver å “lese” med øynene og det du ser (bevegelse av leppene) stemmer ikke overens med den faktiske lyden. Hjerneregionen der dette fenomenet oppstår er i Sulcus temporalis superior. Når du prøver å dekode to sensoriske modaliteter (syn og lyd) er det vanlig at feil oppstår.
Avdelingen for nevrokirurgi ved Houston Medical College (Texas) gjennomførte en studie der de påpekte at når du har en samtale ansikt til ansikt, lytter hjernen din gjennom øret og tyder også ord med øynene. Du gjør dette ubevisst.
Å observere bevegelsen til leppene lar deg forsterke kommunikasjonen i tilfelle vanskeligheter, for eksempel miljøstøy. Imidlertid er det lyder og stavelser som ofte blir feiltolket. Små slutninger og feil oppstår.
Noen mennesker lider denne opplevelsen i større grad
Som vi nevnte tidligere, har personer med Alzheimers sykdom en tendens til å bli alvorlig påvirket av McGurk-effekten. Hvis de på et tidspunkt må lese lepper for å forstå en melding, vil de ikke være i stand til å tyde den.
I 2007 utførte Delbeuck, Collette og Van der Linden forskning som antydet at årsaken til dette kan være forverring av hjernens tilkobling.
På samme måte har det blitt observert at barn med ekspressive språkvansker ikke legger merke til ordlyden. De bruker ikke den visuelle kanalen til å imitere eller forstå hva som uttrykkes for dem. Dette hindrer utviklingen av selve språket.
Det visuelle systemet hjelper deg med å skille mellom lyder
McGurk-effekten vises når du leser andres lepper og forveksler noen stavelser eller ord. Det er noe helt normalt og interessant. Det demonstrerer det faktum at vi som mennesker alltid bruker vårt visuelle system under kommunikasjon. Det er ikke noe som bare mennesker med hørselshemninger gjør.
Hjernen din må sørge for at kommunikasjonsprosessen utføres effektivt. Å gjøre dette innebærer ikke bare lytting, det gjelder også syn.
Å se på munnen til samtalepartneren din letter forståelsen i enhver sammenheng. Dette forklarer viktigheten av samtaler ansikt til ansikt. Det er å lese lyder med øynene en menneskelig ferdighet vi bør være stolte av.
Alle siterte kilder ble grundig gjennomgått av teamet vårt for å sikre deres kvalitet, pålitelighet, aktualitet og validitet. Bibliografien i denne artikkelen ble betraktet som pålitelig og av akademisk eller vitenskapelig nøyaktighet.
- Alsius, A., Navarra, J., & Soto-Faraco, S. (2007). Attention to touch weakens audiovisual speech integration. Experimental Brain Research, 183(3), 399-404.
- Baynes, K., Funnell, M. G., & Fowler, C. A. (1994). Hemispheric contributions to the integration of visual and auditory information in speech perception. Perception & Psychophysics, 55(6), 633-641.
- Delbeuck, X., Collette, F., & Van der Linden, M. (2007). Is Alzheimer’s disease a disconnection syndrome?: Evidence from a crossmodal audio-visual illusory experiment. Neuropsychologia, 45(14), 3315-3323.
- Tiippana K. (2014). What is the McGurk effect?. Frontiers in psychology, 5, 725. https://doi.org/10.3389/fpsyg.2014.00725
- McGurk, H., & MacDonald, J. (1976). Hearing lips and seeing voices. Nature, 264(5588), 746-748.
- Nath, A. R., & Beauchamp, M. S. (2012). A neural basis for interindividual differences in the McGurk effect, a multisensory speech illusion. Neuroimage, 59(1), 781-787.