Ilusões Perceptivas · Ilusão Sonora
Efeito McGurk
Dá para ouvir com os olhos?
O experimento
Antes de começar
- Este experimento usa som. Se puder, use fones de ouvido e comece com o volume baixo.
O que aconteceu?
O som do vídeo é sempre “ba”. Quem diz “va” é só a boca: cada “ba” foi gravado à parte e colado sobre um vídeo de “va”, no instante exato em que a vogal começa. Se você ouviu “va”, foram seus olhos que trocaram a consoante.
Toque em “Ouvir sem a imagem”: com a boca coberta, o “ba” aparece. Depois, assista de novo olhando a boca. Em muita gente o “va” volta, mesmo sabendo do truque.
Por que seu cérebro faz isso?
Entender fala não depende só do ouvido. O cérebro junta o som com o movimento da boca para decidir qual sílaba foi dita, e faz isso antes de você perceber. No “ba”, os lábios se fecham e se abrem. No “va”, os dentes de cima encostam no lábio de baixo. Essa diferença é fácil de ver, mas num som curto ela é bem mais sutil de ouvir.
Quando as duas pistas discordam, a imagem pode decidir onde a consoante foi feita. O resultado não é uma escolha consciente: você simplesmente ouve “va”.
Quando esse atalho funciona bem?
Numa conversa de verdade, a boca e o som combinam. Ver o rosto de quem fala ajuda a entender o que é dito em lugares barulhentos, como uma festa ou um bar, e pessoas com perda auditiva se apoiam bastante nessa pista. Como a mistura é automática, a ajuda chega sem esforço: você não precisa decidir prestar atenção na boca.
Onde isso aparece no dia a dia?
Em filme dublado, a boca do ator diz uma coisa e a voz diz outra, e muita gente sente um estranhamento difícil de explicar. Em chamada de vídeo com atraso, a voz chega fora de compasso com os lábios. E entender alguém de máscara num lugar barulhento é mais difícil justamente porque falta a pista da boca.
Modo Nerd
Abrir o Modo Nerd
Harry McGurk e John MacDonald descreveram o efeito em 1976, num vídeo em que o som de “ba” acompanhava uma boca dizendo “ga”. Muitos participantes relataram ouvir “da”, uma sílaba que não estava nem no som nem na imagem. Essa é a versão clássica, de fusão.
A versão deste experimento, com som “ba” e boca “va”, segue a linha de Lawrence Rosenblum e Helena Saldaña (1992): uma boca que articula com lábio e dentes puxa a percepção para essa consoante. Com um vídeo escolhido por ser convincente, Saldaña e Rosenblum (1994) obtiveram percepção influenciada pela visão em 99% das vezes.
Por que a evidência é mista
O efeito existe, mas a força dele varia muito. Debshila Basu Mallick, John Magnotti e Michael Beauchamp (2015) testaram 165 adultos falantes de inglês com 12 vídeos diferentes. A frequência da ilusão foi de 0% a 100% entre as pessoas e de 17% a 58% entre os vídeos. Em cada vídeo, 77% dos participantes quase nunca ou quase sempre caíram (10% das vezes ou menos, ou 90% ou mais). Quem foi testado de novo um ano depois respondeu de forma muito parecida (correlação de 0,91).
Ou seja, não ouvir “va” não é defeito, e ouvir não é imaginação fértil: as pessoas diferem de forma estável. Revisões recentes (Alsius, Paré e Munhall, 2018; Van Engen e colaboradores, 2022) questionam se a ilusão serve para medir como visão e audição se juntam na fala do dia a dia, já que ela usa sílabas isoladas e som e imagem em conflito.
Onde acontece no cérebro
Michael Beauchamp, Audrey Nath e Siavash Pasalar (2010) localizaram, com ressonância magnética funcional, a parte do sulco temporal superior de cada participante que responde à fala vista e ouvida. Um pulso de estimulação magnética transcraniana nesse ponto reduziu a chance do efeito McGurk, mas só numa janela estreita, de 100 ms antes a 100 ms depois do início do som. O mesmo pulso não atrapalhou a percepção de sílabas em que boca e som combinavam.
Termos técnicos
- Audição
- Visão
- Integração multissensorial
- Percepção da fala
Regiões cerebrais envolvidas
- Sulco temporal superior
Descoberta
Descrito por Harry McGurk e John MacDonald em 1976.
Nível de evidência
Evidência mista
O efeito existe, mas o tamanho, as condições ou a interpretação variam entre estudos.
Base: Basu Mallick, D.; Magnotti, J. F.; Beauchamp, M. S. (2015). Variability and stability in the McGurk effect: contributions of participants, stimuli, time, and response type.
Referências
- Estudo originalMcGurk, H.; MacDonald, J. (1976). Hearing lips and seeing voices. Nature, 264(5588), 746–748.
- Estudo originalRosenblum, L. D.; Saldaña, H. M. (1992). Discrimination tests of visually influenced syllables. Perception & Psychophysics, 52(4), 461–473.
- Estudo originalSaldaña, H. M.; Rosenblum, L. D. (1994). Selective adaptation in speech perception using a compelling audiovisual adaptor. The Journal of the Acoustical Society of America, 95(6), 3658–3661.
- ReplicaçãoBasu Mallick, D.; Magnotti, J. F.; Beauchamp, M. S. (2015). Variability and stability in the McGurk effect: contributions of participants, stimuli, time, and response type. Psychonomic Bulletin & Review, 22(5), 1299–1307.
- Estudo originalBeauchamp, M. S.; Nath, A. R.; Pasalar, S. (2010). fMRI-guided transcranial magnetic stimulation reveals that the superior temporal sulcus is a cortical locus of the McGurk effect. The Journal of Neuroscience, 30(7), 2414–2417.
- RevisãoAlsius, A.; Paré, M.; Munhall, K. G. (2018). Forty years after hearing lips and seeing voices: the McGurk effect revisited. Multisensory Research, 31(1-2), 111–144.
- RevisãoVan Engen, K. J.; Dey, A.; Sommers, M. S.; Peelle, J. E. (2022). Audiovisual speech perception: Moving beyond McGurk. The Journal of the Acoustical Society of America, 152(6), 3216–3225.
Revisão
Este texto ainda não passou por revisão voluntária. Quer ajudar a revisar?
Achou um erro? Escreva para [email protected]