Эфект Мак-Гурка: чаму вашы вочы могуць паўплываць на тое, што вы чуеце?

Калі вы глядзіце дрэнна дубляваны замежны фільм, то вельмі лёгка заўважыць, што гукі, якія вылятаюць з ратоў акцёраў, не супадаюць з рухамі іх вуснаў.

Іншымі словамі, нават калі наш зрок і слых стымулююцца адначасова падчас фільма, наш мозг павінен выконваць сапраўды добрую працу, звяртаючы ўвагу на адпаведнасць руху вуснаў і гукаў.

Што такое эфект Мак-Гурка

Але мозг таксама можа быць уведзены ў зман. У інтрыгуючай ілюзіі, вядомай як эфект Мак-Гурка, назіранне за рухамі вуснаў чалавека можа падманам прымусіць мозг пачуць няправільны гук.

Эфект Мак-Гурка ўзнікае, калі існуе канфлікт паміж глядзельнай прамовай, то ёсць рухам чыйго-небудзь рота і вуснаў, і слыхавы прамовай, прадстаўленай гукамі, якія чалавек чуе. І гэта можа прывесці да ўспрымання зусім іншага паведамленні.

Даследаванне з дапамогай кампутарнай мадэлі

У новым даследаванні неўролагі з медыцынскага каледжа «Бэйлор» у Х'юстане паспрабавалі прапанаваць колькаснае тлумачэнне прычын эфекту Мак-Гурка. Яны распрацавалі кампутарную мадэль, якая была ў стане дакладна прадказаць, калі эфект Мак-Гурка павінен ці не павінен адбыцца ў людзей, паводле вынікаў, апублікаваных 16 лютага ў часопісе PLOS Computational Biology.

У дэманстрацыі эфекту Мак-Гурка, які выкарыстоўваецца ў даследаванні, ўдзельніку прапаноўвалася пакінуць вочы зачыненымі падчас праслухоўвання відэа, якое паказвае чалавека, вырабляючы яго гукі «ба-ба-ба». Затым гэтага ўдзельніка прасілі адкрыць вочы і ўважліва паглядзець на рот чалавека ў відэа, але без гуку. Для ўдзельніка візуальныя эфекты выглядалі так, як быццам чалавек казаў «га-га-га». На апошнім этапе эксперыменту узнаўлялася тое ж самае відэа, але на гэты раз гук быў уключаны, а ўдзельніку прапанавалі яго паглядзець. Адчувальныя да эфекту Мак-Гурка людзі паведамлялі пра тое, што ў трэці раз яны чулі гук «так-так-так», які не адпавядаў ні слыхавым, ні візуальным сігналах, заўважаным раней.

Так адбываецца таму, што мозг спрабуе вырашыць, які, на яго думку, гук бліжэй да таго, што ён бачыць візуальна. Калі ўдзельнік зноў закрываў вочы, і навукоўцы прайгравалі гук відэа, ён зноў чуў арыгінальны гук «ба-ба-ба».

Эфект быў упершыню апісаны ў эксперыменце, праведзеным у 1976 году псіхолагамі Гары Мак-Гурко і Джонам Макдональдом. Ён паказаў, што візуальная інфармацыя, якая прадстаўляецца рухамі рота, можа ўплываць і перавызначаць то, як думае чалавек, што ён чуе.

прагназаванне ілюзіі

«Эфект Мак-Гурка - гэта магутная, мультисенсорная ілюзія, - сказаў суаўтар даследавання Джон Магнотти, дактарант у аддзеле нейрахірургіі ў« Бейлор ». - Мозг ўспрымае слыхавую і візуальную гаворка і аб'ядноўвае іх, каб сфармаваць нешта новае ».

Калі людзі маюць зносіны тварам да асобе, мозг займаецца складанай дзейнасцю, паколькі ён спрабуе вырашыць, як сумясціць руху вуснаў з гукамі прамовы, якія чуе, адзначыў Магнотти.

У даследаванні навукоўцы спрабавалі зразумець, чаму мозг можа лепш складаць некаторыя склады, каб інтэрпрэтаваць гук, які быў пачуты правільна, а іншыя няма.

Прычынна-следчы выснову

Каб зразумець гэта, іх мадэль належыла на ідэю, вядомую як прычынна-следчы выснову, ці працэс, пры якім мозг чалавека вырашае, ці былі гукавыя і візуальныя гукі гаворкі зроблены адным і тым жа крыніцай. Іншыя даследчыкі распрацавалі мадэлі, каб дапамагчы прадказаць, калі можа адбыцца эфект Мак-Гурка, але гэта новае даследаванне з'яўляецца першым, якое ўключае прычынна-выніковую сувязь у сваё вылічэнне, адзначыў Магнотти. Факторынг ў прычынным высноў, магчыма, палепшыў дакладнасць новай мадэлі ў параўнанні з папярэднімі, якія таксама павінны былі прадказваць ілюзіі.

Каб праверыць дакладнасць сваёй мадэлі прадказанні, даследчыкі набралі 60 удзельнікаў і папрасілі іх паслухаць пару слыхавы і глядзельнай прамовы ад аднаго прамоўцы. Затым удзельнікаў папрасілі вырашыць, які гук яны чулі: «ба», «так» або «га».

Іх вынікі паказалі, што распрацаваная мадэль можа пэўна прадказаць, калі большасць удзельнікаў эксперыменту выпрабуюць эфект Мак-Гурка. Але, як і чакалася ў іх разліку, былі выяўлены людзі, якія апынуліся не ўспрымальныя да гэтага, падзяліўся Магнотти.

Цікава адзначыць, што, калі гэты ж тэст быў праведзены са студэнтамі ў Кітаі, а не ў Злучаных Штатах, было даказана, што эфект Мак-Гурка працуе на іншых мовах.

Практычнае прымяненне выкарыстаных камп'ютэрных мадэляў

Магнотти сказаў, што, на яго думку, кампутарныя мадэлі, распрацаваныя для гэтага даследавання, могуць таксама мець практычнае прымяненне. Напрыклад, гэтая мадэль можа быць карысная для кампаній, якія ствараюць кампутары, якія дапамагаюць распазнаваць гаворка, такіх як Google Home або Amazon Echo.

Калі б у гэтых тэхналогіі былі камеры, яны маглі б інтэграваць рух вуснаў людзей у тое, што яны кажуць, каб павысіць дакладнасць сваіх сістэм распазнання прамовы.

Мадэль таксама можа дапамагчы дзецям з кахлеарную імплантатамі, паляпшаючы разуменне даследчыкамі механізму, як візуальная гаворка ўплывае на тое, што чалавек чуе, адзначыў Магнотти.