当前位置：互动百科网 > 生活 >

为何摘下眼镜就听不清了

时间：2024-11-13 22:24来源：www.gddmjj.com作者：未知点击：

一些近视人士或许会发现一个奇妙的现象，在和其他人说话的时候，假如摘下了眼镜，视线模糊的同时，声音仿佛也变得含混不清了。这是否意味着，人的视觉也能“听见”东西？

其实差不多真是如此！大家的双眼是可以帮助大家“听见”东西的，也就是视觉可以辅助听觉。

大家的大脑其实是一个多感觉系统协同工作的系统，不一样的感觉通道（如视觉、听觉、触觉、嗅觉和味觉）之间并非彼此孤立的，大脑中的神经互联网是高度连通的，这类感觉地区之间存在很多的交互连接。比如，颞叶负责听觉处置，枕叶负责视觉处置，而这类地区之间有丰富的神经纤维可以传递信息和协调活动。它们提供各自的信息，大脑将这类信息融合，从而增强感知的准确性和丰富性。[1]

研究职员通过大脑成像技术（如功能性磁共振成像fMRI）和电生理记录，察看到这rId8些地区在多感觉刺激下的动态活动。大家还是以视听场景为例：

当视觉和听觉信息同步出现时，坐落于坐落于枕叶的视觉皮层会有明显的活跃，这是视觉信息处置的第一站，负责处置基本的视觉特点，如形状、颜色、运动。坐落于颞叶的听觉皮层也会有明显的活跃，它负责处置听觉信息的初级特点，如频率和音量。fMRI显示听觉皮层的活动不止是处置声音信息，还会响应和视觉信息同时出现的刺激。

而在这个过程中，上颞沟（STS）是一个要紧的多感觉整理地区，尤其是在视听整理中。上颞沟既同意来自初级视觉皮层和初级听觉皮层的输入，又与其他高级皮层地区相连。通过神经成像研究（如功能性磁共振成像fMRI和正电子发射断层扫描PET），发现上颞沟在处置同时出现的视觉和听觉信息时展示出高度神经活动。也就是说，当视觉信息与听觉信号同步出现时，上颞沟可以通过比对这类信号来达成两种感觉的整理。比如，当一个人看到和听到一个人说话时，上颞沟会将视觉的嘴部运动和听觉的语音信号结合，增强对语言的理解。

大脑“合成”听觉的奇妙现象（麦格克效应）

像如此视觉和听觉之间的整理还会出现一个经典的心理学现象，叫做麦格克效应。这个现象初次在1976年被哈里·麦格克（Harry McGurk）和约翰·麦克唐纳（John MacDonald）发现，这个实验中记录，参与者看到一个人嘴部发“ga”的口型，但听到的是“ba”的声音时，他们常常会报告听到的是“da”或其他第三种声音。[2][3]

这一效应表明，当视觉和听觉信息不同时，大家会产生一种融合的感知经验，有时人的听觉还会遭到视觉的影响，产生错误的认知结果。这一效应揭示了视觉在语音感知中的要紧用途，与大脑整理不同感觉信息的复杂机制。

麦格克效应的产生也源于多感觉整理机制。大脑中的上颞沟（Superior Temporal Sulcus，STS）和前额叶皮层（Prefrontal Cortex）负责整理来自视听通道的信息。麦格克效应表明，当两种感觉信息（视觉和听觉）存在冲突时，大脑会尝试合理化和融合这类信息，形成一致的感知体验。[4]

这个现象可以非常明确说明，大家的听觉并不单纯源于听觉通道，而是大脑“合成”的结果。具体来讲，当双眼看到一个语音动作，耳朵听到不一样的语音信号时，大脑会混合这类信息，致使感知到的语音其实不是完全基于视觉，更不是完全基于听觉，而是两者的某种组合。这种融合感知的过程表明视觉在某些状况下可以比听觉更能影响大家对语音的感知。

那样，和不一样的人说话会不会影响视听成效呢？

其实还真的会。譬如和熟知的人说话与和不熟知的人说话，产生的麦格克效应也不同。

说话人脸的熟知程度也会干扰大家的认知，有研究发现，假如实验者对说话的人脸较为熟知的话，麦格克效应则较弱，也就是大家的听觉更困难遭到视觉的影响。反之，假如对不熟知的人说话，则更需要调动视觉来理解他们更所说的内容，麦格克效应更强。[5]

不同语言用户的人对话中产生的麦格克效应也不同。由于不同语言的音素结构和发音规则有所不同，这可能也影响麦格克效应。比如，一些语言可能有更多的双辅音或者复杂辅音发音，这类复杂的语音成分可能使得视觉信息在语音感知中有哪些用途更为显著。譬如粤语和中文相比，麦格克效应就更强，也就意味着语言用户更依靠于视觉信息。

不同国家人与人之间的交流文化也会干扰麦格克效应。譬如很多亚洲文化（如日本、韩国）比较强调对话过程中对面部表情和肢体语言的解析，这可能使得亚洲说话者更依靠视觉信息进行语音理解。相比之下，一些西方文化可能更侧重于准确的语音传达，从而在麦格克效应实验中对视觉信息的依靠度较低。

理解视听整理的现象有哪些意义？

知道人类大脑视听整理对于听觉背后的机制，可以也能够帮助在AI范围借助这一点。譬如开发多模态的语音辨别系统，在语音辨别中结合视觉信息，可以提升系统在嘈杂环境中的辨别准确率。

同时，在为听力障碍者设计的助听设施里也可以应用这一点，假如能结合视觉信息，将大大改变用户的语音理解能力。比如通过结合唇形读取技术，可以补偿部分听觉信息的缺失。

当然，理解视听整理也能帮助大家解决平时问题，譬如帮助大家理解“听不清”背后的复杂机制，如此下次听不清其他人说话的时候，未必要怀疑自己“聋了”（也会是由于需要配副新眼镜了）。

参考资料：

[1] Stein B E, Stanford T R. Multisensory integration: current issues from the perspective of the single neuron[J]. Nature reviews neuroscience, 2008, 9(4): 255-266.

[2] https://www.youtube.com/watch?v=jtsfidRq2tw

[3] McGurk H, MacDonald J. Hearing lips and seeing voices[J]. Nature, 1976, 264(5588): 746-748.

[4] Nath A R, Beauchamp M S. A neural basis for interindividual differences in the McGurk effect, a multisensory speech illusion[J]. Neuroimage, 2012, 59(1): 781-787.

[5] Walker S, Bruce V, O’Malley C. Facial identity and facial speech processing: Familiar faces and voices in the McGurk effect[J]. Perception Psychophysics, 1995, 57(8): 1124-1133.

[6] Combining Behavioral and 进销存 Methodologies to Investigate the Differences Between McGurk Effects Demonstrated by Cantonese and Mandarin Speakers

文章由科普中国-创作培育计划出品，转载请注明来源。

上一篇：沧海桑田守初心 石油花开绽芳华

网站首页 返回栏目

下一篇：没有了

相关文章

推荐文章