DieuKy.comĐiều Kỳ
Ảo giác của tai, tay và cơ thể

Hiệu ứng McGurk: vì sao nhìn khẩu hình làm tai nghe ra một âm khác hẳn

Hiệu ứng McGurk: tai nghe "ba", mắt thấy môi nói "ga", não lại báo "đa". Cách tự thử, vì sao não trộn tiếng với hình và chỗ hay hiểu sai.

Two students in a quiet classroom in Hue, one silently mouthing a syllable while the other watches her lips closely, faces turned away from camera, warm afternoon light

Hiệu ứng McGurk là hiện tượng khi tai nghe một âm tiết nhưng mắt nhìn thấy môi người nói một âm tiết khác, não không chọn bên nào mà hoà cả hai thành một âm thứ ba. Ví dụ kinh điển: đoạn tiếng là "ba", hình là khuôn miệng nói "ga", và rất nhiều người nghe ra "đa". Điều kỳ lạ nhất là khi nhắm mắt lại, âm thanh lập tức trở về "ba"; mở mắt ra, nó lại thành "đa", dù bạn đã biết rõ mẹo.

Bài này kể lại thí nghiệm gốc, hướng dẫn bạn tự thử bằng chiếc điện thoại, giải thích vì sao bộ não lại "tin" đôi mắt trong việc nghe, và gỡ vài hiểu lầm phổ biến quanh hiệu ứng này. Mọi điều nói ở đây là kiến thức về tri giác, không thay cho việc khám thính lực khi bạn lo về tai của mình.

Thí nghiệm năm 1976: âm "ba" cộng hình "ga" thành một âm khác

Hiệu ứng mang tên nhà tâm lý học Harry McGurk, người cùng trợ lý John MacDonald công bố phát hiện trên tạp chí Nature năm 1976, với tiêu đề có thể dịch là "Nghe môi và nhìn giọng". Chuyện kể lại trong giới nghiên cứu là phát hiện đến khá tình cờ: nhóm đang làm thí nghiệm về cách trẻ nhỏ học ngôn ngữ, cần một đoạn băng ghép tiếng của âm tiết này với hình của âm tiết khác, và khi xem lại, chính người làm thí nghiệm nghe ra một âm không có trong băng.

Cách ghép rất đơn giản. Người ta quay một người nói lặp lại "ga ga ga", rồi thay phần tiếng bằng bản ghi "ba ba ba" sao cho khớp nhịp. Khi người xem vừa nghe vừa nhìn, phần lớn người trưởng thành trong nghiên cứu gốc báo cáo nghe thấy "da". Với người Việt, âm này gần với chữ "đa" của mình. Khi đảo ngược (tiếng "ga", hình "ba"), nhiều người lại nghe một kiểu pha trộn khác, như "bga" hay "gba", nghĩa là não cố nhét cả hai thông tin vào một âm.

Điểm làm thí nghiệm này nổi tiếng không chỉ là sự nhầm lẫn mà là tính cưỡng bức của nó. Bạn biết chắc tiếng trong loa là "ba", bạn có thể tua lại hàng chục lần, nhưng chừng nào mắt còn nhìn vào khuôn miệng thì tai vẫn báo "đa". Hiểu biết không sửa được tri giác. Đây là đặc điểm chung của các ảo giác giác quan thật sự, khác với chuyện nghe nhầm do không chú ý.

Từ năm 1976 đến nay, hiệu ứng McGurk được lặp lại ở rất nhiều phòng thí nghiệm, với nhiều ngôn ngữ, và trở thành một trong những ví dụ được trích dẫn nhiều nhất để chứng minh rằng nghe nói không chỉ là việc của tai.

Tự thử hiệu ứng McGurk tại nhà với điện thoại

Bạn không cần thiết bị phòng thí nghiệm. Hai người và một chiếc điện thoại có ứng dụng quay video là đủ để thử một phiên bản thô, kết quả không gọn như bản dựng chuyên nghiệp nhưng nhiều người vẫn thấy hiện tượng. Làm theo thứ tự sau:

  1. Người thứ nhất ngồi trước camera, ánh sáng chiếu thẳng vào mặt để thấy rõ môi, quay một đoạn nói chậm "ga, ga, ga" với nhịp đều, khoảng một giây một tiếng.
  2. Cũng người đó quay thêm một đoạn nói "ba, ba, ba" với cùng nhịp, cố giữ tốc độ giống hệt đoạn trước.
  3. Dùng ứng dụng chỉnh video trên điện thoại, tách tiếng của đoạn "ba" và đặt lên hình của đoạn "ga", căn sao cho tiếng nổ của môi khớp với lúc miệng mở. Lệch quá một phần mười giây là hiệu ứng yếu đi rõ.
  4. Cho người thứ hai, chưa biết gì về thí nghiệm, xem đoạn đã ghép và hỏi một câu trung tính: "Bạn nghe thấy âm gì?" Đừng gợi ý đáp án.
  5. Sau đó bảo người xem nhắm mắt, nghe lại cùng đoạn ấy, rồi mở mắt nghe lần nữa. So sánh hai câu trả lời.
  6. Đảo vai: người thứ hai quay, người thứ nhất xem. Ghi lại ai thấy hiệu ứng mạnh, ai gần như không thấy.

Nếu không ghép được video, bạn có thể tìm các đoạn minh hoạ hiệu ứng McGurk do các trường đại học công bố để thử. Khi ghép tự làm, hiệu ứng thường yếu hơn bản dựng chuẩn vì giọng, ánh sáng và độ khớp hình tiếng chưa đủ tốt. Kết quả không như mong đợi không có nghĩa là tai hay mắt bạn có vấn đề.

Vì sao não trộn tiếng và hình thay vì tin hẳn vào tai

Lời nói vốn là sự kiện của cả mặt lẫn tiếng. Từ khi còn rất nhỏ, ta luôn vừa nghe vừa nhìn người nói. Môi khép rồi bật ra cho âm "b", "p", "m"; lưỡi và vòm họng tạo âm "g", "k" phía sau, môi gần như không khép. Não học được rằng hai nguồn này luôn đi cùng nhau và dùng cả hai để đoán âm.

Mỗi giác quan giỏi một phần khác nhau. Tai phân biệt tốt cách phát âm (có rung dây thanh hay không), còn mắt phân biệt tốt vị trí cấu âm (môi hay lưỡi). Âm "đa" là lời giải mà não chọn khi phải dung hoà: nó không có môi khép như "ba", cũng không lùi sâu như "ga", nên khớp tạm với cả hai dữ liệu đang mâu thuẫn.

Não trộn tín hiệu theo độ tin cậy. Nhiều mô hình trong khoa học tri giác mô tả não như một bộ cân, nguồn nào rõ hơn thì được tin hơn. Khi tiếng bị ồn, hình miệng càng được dựa vào nhiều. Đây là lý do trong quán cà phê ồn ào, bạn vô thức nhìn môi người đối diện để nghe cho rõ.

Sự hoà trộn xảy ra sớm, trước khi ta kịp ý thức. Các nghiên cứu hình ảnh não cho thấy vùng xử lý âm thanh nhận ảnh hưởng của thông tin thị giác khá sớm. Vì vậy ta không trải nghiệm hai thứ rồi mới chọn, mà chỉ nhận về một âm duy nhất đã được trộn sẵn. Chi tiết vùng não nào làm chính việc này vẫn còn được bàn luận, các nhóm nghiên cứu nhấn mạnh những vùng khác nhau.

Không phải ai cũng bị: khác biệt giữa người với người

Một điều ít được nói khi chia sẻ video McGurk trên mạng là mức độ hiệu ứng khác nhau rất nhiều giữa các cá nhân. Có người gần như lần nào cũng nghe "đa", có người chỉ thỉnh thoảng, và có người không bao giờ thấy, chỉ nghe đúng "ba" như tiếng trong loa. Các nghiên cứu về sau ghi nhận độ dao động này khá lớn ngay trong cùng một nhóm người khoẻ mạnh, nên không thể dùng một lần thử để kết luận điều gì về một người.

Ngôn ngữ mẹ đẻ có thể cũng góp phần. Một số nghiên cứu so sánh người nói tiếng Nhật, tiếng Trung với người nói tiếng Anh và thấy hiệu ứng yếu hơn ở nhóm trước, có giả thuyết rằng thói quen văn hoá ít nhìn thẳng vào miệng người nói làm thay đổi trọng số của hình. Tuy vậy, các kết quả này chưa thống nhất, vì chất lượng video, giọng người nói và cách đặt câu hỏi cũng làm kết quả lệch đi. Bạn nên coi đây là câu hỏi còn mở chứ không phải sự thật đã chốt.

Tuổi tác cũng được nhắc đến. Trẻ nhỏ trong một số thí nghiệm ít bị ảnh hưởng hơn người lớn, gợi ý rằng khả năng trộn tiếng với hình được hoàn thiện dần qua nhiều năm nghe nói. Người cao tuổi, khi tai kém đi, thường dựa vào khẩu hình nhiều hơn.

Điều quan trọng cần nhớ: không thấy hiệu ứng McGurk không phải dấu hiệu bệnh, và thấy hiệu ứng mạnh cũng không có nghĩa tai bạn kém. Đây chỉ là sự khác nhau trong cách não mỗi người cân hai nguồn thông tin.

Hiệu ứng McGurk trong đời sống hằng ngày

Khi đã biết hiện tượng này, bạn sẽ nhận ra não trộn tiếng và hình ở rất nhiều tình huống quen thuộc, có lúc giúp ta, có lúc gây khó chịu:

  • Phim lồng tiếng lệch môi: khi môi diễn viên và tiếng nói không khớp, nhiều người thấy mệt hoặc khó tập trung hơn hẳn, vì não liên tục phải xử lý hai nguồn đang cãi nhau.
  • Gọi video bị trễ: tiếng đến trước hình hoặc ngược lại một chút là cuộc trò chuyện trở nên khó nghe, dù chất lượng âm thanh vẫn tốt.
  • Nghe trong chỗ ồn: ở bến xe, chợ hay tiệc cưới, nhìn môi người nói giúp bạn hiểu rõ hơn đáng kể, và đeo khẩu trang che miệng làm việc nghe khó đi, như nhiều người đã nhận ra trong những năm đeo khẩu trang phổ biến.
  • Ảo giác "người nói tiếng bụng": khi người biểu diễn giữ môi gần như bất động và cử động miệng con rối, khán giả nghe như tiếng phát ra từ con rối. Đây là anh em gần của McGurk: hình ảnh kéo vị trí âm thanh về phía có chuyển động.
  • Người khiếm thính đọc khẩu hình: kỹ năng này cho thấy khẩu hình mang rất nhiều thông tin, nhưng cũng chỉ ra giới hạn, vì nhiều âm trông giống hệt nhau trên môi.

Những tình huống trên giải thích vì sao các nhà làm phim và kỹ sư âm thanh rất khắt khe với độ khớp tiếng và hình. Một chút lệch mà mắt không nhận ra bằng ý thức vẫn có thể làm khán giả thấy "có gì đó sai sai".

Những chỗ hay hiểu sai về hiệu ứng McGurk

Video McGurk lan truyền nhiều, kéo theo vài cách diễn giải quá đà. Bảng dưới đặt cạnh nhau điều hay nghe và điều nghiên cứu thực sự cho thấy:

Điều hay ngheThực tế
Ai cũng nghe ra "đa"Mức độ khác nhau nhiều giữa các cá nhân; có người không bao giờ thấy hiệu ứng.
Biết mẹo rồi thì sẽ hết bị lừaHiểu biết không tắt được ảo giác; chỉ nhắm mắt hoặc nhìn đi chỗ khác mới làm âm trở lại "ba".
Hiệu ứng chứng tỏ tai không đáng tinNgược lại, nó cho thấy não rất giỏi phối hợp các giác quan; trong đời thật, tiếng và hình hầu như luôn khớp nhau.
Không thấy hiệu ứng là có bệnhKhông có cơ sở; một lần thử tự làm không đủ để nói gì về sức khoẻ.
Chỉ xảy ra với tiếng AnhĐã được ghi nhận ở nhiều ngôn ngữ, dù độ mạnh có thể khác nhau và vẫn đang được bàn luận.

Nếu muốn giải thích cho trẻ, bạn chỉ cần một câu ngắn: "Mắt và tai cùng làm việc nghe. Khi hai bạn ấy nói khác nhau, não chọn một đáp án ở giữa." Câu đó đủ đúng để làm nền cho những thắc mắc sau này.

Hiệu ứng này nói gì về cách ta cảm nhận thế giới

Hiệu ứng McGurk thường được giới thiệu như một mẹo vui, nhưng nó chạm vào một ý lớn của khoa học tri giác: thứ ta cảm nhận không phải bản ghi trung thực của từng giác quan, mà là bản dựng mà não tổng hợp từ nhiều nguồn để có lời giải hợp lý nhất. Phần lớn thời gian, cách tổng hợp ấy giúp ta nghe rõ hơn, nhanh hơn. Chỉ khi các nhà nghiên cứu cố tình tạo ra mâu thuẫn, ta mới nhìn thấy bộ máy làm việc.

Các ảo giác khác trong danh mục này, từ bàn tay cao su đến màu sắc làm thay đổi vị, đều xoay quanh cùng một nguyên lý. Đọc chúng cạnh nhau, bạn sẽ thấy não liên tục đoán, kiểm tra và sửa lại, và hầu hết những lần nó "sai" đều là do các quy tắc vốn rất hữu ích bị đặt vào hoàn cảnh bất thường.

Lần tới khi xem một đoạn phim lệch tiếng hoặc nói chuyện trong chỗ ồn, bạn có thể thử để ý xem mình đang nhìn vào đâu. Chỉ cần tò mò như vậy là đã đủ để hiệu ứng McGurk trở thành một điều kỳ thú hằng ngày.

Câu hỏi thường gặp

Hiệu ứng McGurk là gì nói ngắn gọn?

Đó là khi tai nghe một âm tiết, mắt thấy môi nói một âm tiết khác, và não hoà hai thông tin thành âm thứ ba. Ví dụ kinh điển là tiếng "ba" ghép với hình miệng nói "ga" khiến nhiều người nghe ra "đa".

Vì sao nhắm mắt lại thì nghe đúng?

Khi nhắm mắt, não chỉ còn nguồn âm thanh nên không có mâu thuẫn để hoà trộn. Ngay khi mở mắt và nhìn vào khuôn miệng, thông tin thị giác quay lại và âm nghe được lại bị kéo lệch.

Thử mà không thấy hiệu ứng thì có sao không?

Không sao cả. Mức độ hiệu ứng McGurk khác nhau nhiều giữa các cá nhân, và video tự ghép thường kém khớp hơn bản dựng chuẩn. Không thấy hiệu ứng không phải là dấu hiệu về sức khoẻ của tai hay mắt.

Hiệu ứng McGurk có xảy ra với tiếng Việt không?

Nguyên lý trộn tiếng và hình là chung cho người nói mọi ngôn ngữ, nên bạn có thể thử với âm tiết tiếng Việt. Độ mạnh có thể khác nhau tuỳ ngôn ngữ, và các nghiên cứu so sánh giữa các ngôn ngữ chưa đi đến kết luận thống nhất.

Hiểu hiệu ứng này có ích gì trong đời sống?

Nó giải thích vì sao nhìn mặt người nói giúp nghe rõ trong chỗ ồn, vì sao phim lệch tiếng gây mệt, và vì sao khi gọi video nên chọn kết nối ổn định. Với người làm phim, dạy học hay thuyết trình, khớp tiếng và hình là điều đáng chú ý.

Cần tư vấn cụ thể cho trường hợp của bạn?

Chúng tôi sẽ liên hệ trong vòng 24 giờ.

Đăng ký tư vấn ngay

Bài viết liên quan

Bạn cần hỗ trợ thêm?

Để lại thông tin, chúng tôi sẽ liên hệ trong 24 giờ.

hoặc
Gọi ngay 0926 138 138