McGurk effekt: varför dina ögon kan påverka vad du hör?

När man tittar dåligt dubbade utländska film, är det mycket lätt att se att de ljud som avges från munnen av skådespelarna inte sammanfaller med deras läpprörelser.

Med andra ord, även om våra ögon och öron stimuleras samtidigt under filmen, måste vår hjärna göra ett riktigt bra jobb, att uppmärksamma att matcha läpprörelser och ljud.

Vad är McGurk effekten

Men hjärnan kan också bli vilseledda. I en spännande illusion kallas McGurk effekt kan observation av den mänskliga läpprörelserna lura hjärnan att höra fel ljud.

McGurk effekt uppstår när det finns en konflikt mellan visuell tal, det vill säga rörelse någons mun och läppar, och höra tal representerat ljud som en person hör. Och det kan leda till uppfattningen av en helt annat budskap.

En studie med en datormodell

I den nya studien har neuroforskare från "Baylor" College of Medicine i Houston försökt att erbjuda en kvantitativ förklaring av skälen McGurk effekt. De har utvecklat en datormodell som kunde exakt förutsäga när McGurk effekten bör eller inte bör förekomma hos människor, enligt resultat som publicerades den 16 februari i tidskriften PLOS Computational Biology.

Demonstrationen mcgurk-effekten som används i studien ombads deltagarna att lämna dina slutna ögon medan du lyssnar på en video som visar en person, vilket gör honom ljudet "ba-ba-ba". Därefter deltagaren ombedd att öppna sina ögon och titta närmare på mynningen av en person i videon, men inget ljud. Deltagare visuella effekter såg ut som om mannen sade "ha-ha-ha." Vid det sista steget i experimentet återges samma video, men den här gången ljudet påslagen och partiet erbjöd honom en blick. Känslig för McGurk effekten människor har rapporterat att den tredje gången de hade hört ljudet "da-da-da", som inte överensstämmer med någon hörsel- eller visuella signaler, sett tidigare.

Detta händer eftersom hjärnan försöker bestämma vad, enligt hans mening, ljudet närmare vad han ser visuellt. När deltagaren blundar igen, och forskarna har återges ljudet av videon igen hörde han originalljudet "ba-ba-ba".

Effekten beskrevs första gången i ett experiment som utfördes 1976 av psykologen Harry Mc Gurk och John MacDonald. Han visade att den visuella informationen från rörelser i munnen, kan påverka och definiera hur en person tror att han hör.

Prediction illusion

"McGurk effekt - är en kraftfull, multi-sensorisk illusion - säger studie medförfattare John Magnotti, doktorand vid institutionen för neurokirurgi i" Baylor ". - Hjärnan uppfattar auditiv och visuell tal och kombinerar dem för att skapa något nytt ".

När människor kommunicerar ansikte mot ansikte, är hjärnan engagerad i komplexa verksamheter, när han försöker att avgöra hur man kombinerar läppen rörelse med talljud som hörs, sade Magnotti.

I studien har forskare försökt förstå varför hjärnan är bättre på att ställa några stavelser att tolka ljud som korrekt hörs, men andra inte.

orsaks~~POS=TRUNC slutsats

För att förstå detta, de förlitade sig på idén om modellen kallas orsaks slutsats, den process genom vilken den mänskliga hjärnan avgör om ljud och visuella talljud produceras av samma källa. Andra forskare har utvecklat en modell för att förutsäga när kan ske McGurk effekt, men den nya studien är den första att inkludera en orsak och verkan relation i beräkningen, sade Magnotti. Factoring i orsaks slutsats kan förbättra noggrannheten hos den nya modellen jämfört med tidigare, som också var att förutsäga illusion.

Att kontrollera riktigheten av deras modellprediktioner forskarna rekryterade 60 deltagare och bad dem att lyssna på ett par auditiv och visuell tal från en enda högtalare. Därefter ombads deltagarna att bestämma vilken typ av ljud de hade hört :. "Ba", "da" och "ga"

Deras resultat visade att den utvecklade modellen på ett tillförlitligt sätt kan förutsäga när de flesta deltagarna i experimentet kommer att testa McGurk effekt. Men som väntat i beräkningen, det var identifierade personer som inte var mottagliga för denna delade Magnotti.

Intressant, när samma test genomfördes med elever i Kina, inte USA, har det visat sig att McGurk effekten fungerar i andra språk.

Praktisk tillämpning av de använda datormodeller

Magnotti sade att enligt hans mening, kan datormodell som utvecklats för denna studie också vara av praktisk användning. Till exempel kan denna modell vara användbar för företag som skapar datorer som hjälper till att identifiera det, såsom Googles startsida eller Amazon Echo.

Om dessa tekniker var kameror, kan de integreras människor i rörelse på läpparna, säger de, för att förbättra noggrannheten i sin taligenkänningssystem.

Modellen kan också hjälpa barn med cochleaimplantat, förbättra förståelsen av mekanismen av forskare som visuella det påverkar vad man hör, sade Magnotti.