并非先听见声音后理解语义 大脑语音处理可“多线程”工作
小电极阵列收集听觉皮层神经信号的方式，通俗来讲就是通过电极直接捕获皮层表面的神经信号，由于外侧颞上回暴露在外侧颞叶，因此可通过皮层脑电图记录方法获取。——倪广健 天津大学医学部副主任、智能医学工程教育部工程研究中心副主任
大脑是如何听懂语言的？几十年来，科学家们一直认为听觉皮层中的语音处理就像工厂的流水线一样，按照先后不同处理工序串联在一起，最终转化成有意义的单词。
然而这一理论近日遭到了挑战，一项发表在《细胞》杂志上的研究结果表明，大脑对听觉和语言的处理是并行进行的。
这种语音处理的并行性质推翻了长期以来的相关假设，可能会为医生提供新的思路，以治疗患有阅读障碍等问题的儿童，帮助他们顺利识别语音。
传统假设中大脑如何“听懂”语言
“人脑在听觉环境中处理语音信息时，传统理论认为听觉皮质处理信息的过程是自上而下的。当含有语意的声音传到耳中，耳蜗将其转换成电信号，在初级听觉皮层分析声谱，在次级听觉区域提取音素，在外侧和腹侧颞叶皮层提取单词，顶叶和额叶区域基于语法和语义属性并结合时间信息，进行单词顺序推断并最终理解句子的含义。”天津大学医学部副主任、智能医学工程教育部工程研究中心副主任倪广健介绍。
“语音感知的经典层次模型是假设声音信息首先在初级听觉皮层接收，然后通过与外侧颞上回连接转化为更复杂的表征。”倪广健说，这是因为先前有关听觉机制的研究主要基于解剖模型，认为大脑遵循一种从初级到高级的层次渐进处理模式，高级听觉区域对复杂的语音和音乐有更强的反应。
一直以来，这一理论缺乏直接证据的支持，因为它需要整个听觉皮层在极高时空分辨率的条件下记录详细的神经生理学信息。但是初级听觉皮层位于大脑额叶和颞叶的深处，因此想进行探究并不容易。
此次最新研究对人类初级和次级听觉皮层功能组织的研究结论与先前一致，但在赫氏回和颞上回的起始区发现了早期独立处理的证据，而非传统认为的遵循语音简单串行的皮层处理层次。可以确定的是，皮层前部和中部颞上回，具有明显的并行处理和潜在的长潜伏期串行处理，说明听觉皮层具有分布式的专业处理单元，每个单元代表了语音信号中不同的声学和语音线索，它们的组合创造了丰富的语音理解体验。
非侵入技术探究大脑受限于时空分辨率
目前，已有一些较为成熟的非侵入式技术用于研究大脑处理听觉信息，例如具有较高空间分辨率的近红外光谱NRIS、功能性核磁共振成像fMRI、脑磁图MEG等，以及具有较高时间分辨率的脑电EEG等。
倪广健举例说，比如近红外光谱通过测量血氧含量表征听觉皮层的代谢状况，就可以有效反映外界刺激下听觉皮层的变化情况，具有噪声低、抗环境干扰性强、成本相对较低、安全便携、易于使用等优点。
功能性核磁共振成像可探索大脑处理听觉信息的过程，通过核磁共振造影来测量神经元活动所引发的血液动力的改变，实现对特定大脑活动皮层区域进行定位，具有准确定位某些区域或某些疾病发病区域（如癫痫的病灶）的优势，在脑神经科学领域应用相对较为广泛。
“在静息状态下脑部自发的低频活动的同步化现象广泛存在于听觉系统内，因此功能性核磁共振成像能够提供人类听觉皮层不同功能和解剖区域如何相互作用的更完整的图像，适合用于研究不同脑区之间的功能连接性。”倪广健说。
另一方面，具有高时间分辨率的脑电技术因为与人工耳蜗的兼容性也使得脑电逐渐展现了临床听觉客观评估研究的能力和潜力，使得大规模探索临床人工耳蜗患者听觉处理模式成为可能。#p#分页标题#e#
然而，上述非侵入式技术在空间分辨率和时间分辨率上往往无法兼具。倪广健表示，单独采用某一种非侵入性技术探索听觉信息的处理过程时，会受限于有限的时间—空间分辨率，无法更好地探究局部异质神经元间的映射结果，因此无法具体回答语音表征问题。《细胞》杂志发表的新研究通过植入小电极阵列，创新性地突破了这一局限。
植入电极可绘制听觉区域特征编码图
在此次发表的新研究中，小电极阵列被放置在受研究者的整个听觉皮层中收集神经信号。有9名患者参与了实验。因为需要切除脑部肿瘤或定位引发癫痫的病灶，这些患者接受了神经外科手术。与此同时，他们同意让医生在手术过程中将微电极阵列放置在他们的听觉皮层，收集神经信号，用于分析语言功能和定位癫痫，以及研究听觉皮层如何处理语音信息。
“小电极阵列收集听觉皮层神经信号的方式，通俗来讲就是通过电极直接捕获皮层表面的神经信号，由于外侧颞上回暴露在外侧颞叶，因此可通过皮层脑电图记录方法获取。”倪广健认为，植入式电极克服了以往采用功能性核磁共振成像技术研究时不能很好探明腹侧沟回等脑沟的问题。
在这个新研究中，皮层脑电图的高时间分辨率，能够探测赫氏回上的初级听觉皮层到颞上回的层次结构与听语音和音调数据的一致程度。
“其从左颞平面的636个电极部位和颞上回获取颅内记录，与以前的颅内手术方法是不同的。”倪广健解释，以前的颅内手术方法每次仅从这些区域中的一个区域进行零碎取样，而此显微手术进入外侧裂可同时记录人类听觉皮层所有区域对语音的高度异质性反应。
此外，该工作采用的高密度电极网格使得同时记录人类颞叶听觉皮层多个亚区的神经活动成为可能，因此能够确定听觉信息处理的流程，以及发现语音信号中的线索是如何跨听觉皮层进行映射的。
“这种分析需要对自然语音和实验控制的简单声音刺激的神经反应进行采样，同时对所有皮层听觉区域进行采样，在初级和高阶听觉区域绘制一张全面的特征编码图，从而能够对信息流模型和皮层表征转换进行有意义的评估。”倪广健说。
在这项研究中，当为参与者播放短语和句子时，位于颞上回中的某些区域的反应速度与初级听觉皮层一样快，这表明这两个区域同时开始处理声学信息。
倪广健介绍，该工作还进一步评估了每个区域在语音处理中的作用，探索激活的时间和顺序，每个区域中简单和复杂声音表征的性质，以及它们在功能性和外科消融的语音理解中的因果作用。
“植入电极的方式在大脑的其他研究领域中已有不少成功典范，例如脑控打字，准确率已达到90%以上；基于皮层脑电的语音重构，句子的整体准确率已达到60%；脑控机器人，解码运动状态实现机械臂的控制等等。”倪广健表示，植入电极有助于采集到高质量的神经电活动，具有较高的时空分辨率，比较适合机制机理方向的研究，从而探明脑部或者神经性系统疾病的成因及提供治疗手段。而非侵入式技术则由于其无创的特点，具有更加广泛的应用场景。（记者 陈 曦）
*免责声明： 凡本网注明“来源：XXX(非神州瞭望网)”的作品，均转载其它媒体，转载目的在于传递更多信息，并不代表本网赞同其观点和对其真实性负责。若内容涉及投资建议，仅供参考勿作为投资依据。本网站无法鉴别所上传图片或文字的知识版权，如果侵犯，请及时通知我们，本网站将在第一时间及时删除。
-
- 全球人工智能市场继续高歌猛进
-
近年来，人工智能领域的发展可谓突飞猛进，目前已迅速融入到经济、社会、生活等各行各业，在全世界燃起燎原之势。国际数据公司（IDC）近日发布的《全球人工智能市场半年报告》预测称
2022-03-25
-
- 揭开尘封“成长史” 迄今最清晰银河系形成演化图绘成
-
千百年来，人们为了揭开广袤银河和浩瀚宇宙的奥秘，从未停止过探索的脚步。 3月24日，《自然》以封面文章的形式发布了一项银河系研究的重要进展。基于中科院国家天文台运行的郭守敬望
2022-03-25
-
- 入选“天宫课堂”，这些实验不只是好玩
-
3月23日下午，400公里高空之上，天宫课堂第二课顺利开讲，太空冰雪实验、液桥演示实验、水油分离实验、太空抛物实验等一系列别有趣味的实验轮番上演。 什么样的实验才能入选天宫课堂的
2022-03-25
-
- GSMA发布《2022全球移动经济发展》报告
-
近日，GSMA智库发布《2022全球移动经济发展》报告，报告预计到2025年，移动用户数从53亿上升到57亿，覆盖人口从67%上升到70%；5G连接数占总连接数的比重从2021年的8%提升到2025年的25%；运营商营
2022-03-25
-
- 发展提速，算力赋能效应凸显
-
算力在经济社会发展中扮演越来越重要的角色。今天，数据已成为新的经济要素，算力随之成为释放数据价值的关键驱动力，是助推各行各业数字化转型的关键力量。近年来，我国算力水平快
2022-03-25
-
- “东数西算”助力我国全面推进算力基础设施化
-
近日，国家发展改革委、中央网信办、工业和信息化部、国家能源局联合印发通知，同意在京津冀、长三角、粤港澳大湾区、成渝、内蒙古、贵州、甘肃、宁夏8地启动建设国家算力枢纽节点，
2022-03-25
-
- 计算力成为经济发展驱动力
-
由中国联通建设的国家（中卫）新型互联网交换中心机房。宁夏近日出台了关于促进大数据产业发展应用的实施意见，打造面向全国的计算力保障基地。 新华社记者 王 鹏摄 数字经济和实体经
2022-03-25
-
- 加强科技伦理治理 这些新动作将落地
-
新华网北京3月24日电（凌纪伟）发布科技伦理高风险科技活动清单、探索建立伦理审查中心、推动成立中国科技伦理学会3月23日召开的新闻发布会上，科技部、卫生健康委、中国科协等单位相
2022-03-24
-
- 有序推进制造业梯度转移
-
今年《政府工作报告》提出，增强区域发展平衡性协调性。支持产业梯度转移和区域合作。工信部等十部门不久前发布了《关于促进制造业有序转移的指导意见》，这是贯彻落实党中央国务院
2022-03-24
-
- 20毫秒！量子比特存储时长创纪录
-
据物理学家组织网22日报道，瑞士日内瓦大学研究人员将一个量子比特存储在一个晶体内，持续时间长达20毫秒，创下新世界纪录，为开发出长距离量子通信网络奠定了重要基础。 量子通讯和量
2022-03-24