交流是人类最重要的社会行为之一。我们通过交流来传递信息、获取知识、建立信任。不同于竞争、合作、共情等高级社会认知功能,我们对复杂交流行为所依赖的认知和神经机制知之甚少。理解交流行为不仅需要研究交流信号本身(如表情、手势、语音、词义等),还需要探索这些信号是如何在具体的社会情境中被灵活使用,表达含义。例如,当一个男孩试图邀请自己喜欢的女孩约会时,女孩回答“你是个好人”。男孩可能很快意识到女孩的“潜台词”——她对自己没兴趣,而即便人工智能精通语音和词义识别,也很可能完全误解这句话。
大脑如何因地制宜地编码和解码交流信号、传递意图,是一个公认重要却困难的研究问题。它的困难一方面源自于人类交流行为的复杂性,另一方面也由于缺乏定量刻画其认知与神经机制的工具。早在1975年,哲学家Grice就提出了一个著名假说,猜测人们通过某些合作性原则来使用语言信号,以达成相互理解[1]。虽然该“合作原则”被写进当今几乎所有语用学教科书的第一章甚至第一段,但一直都作为哲学猜想存在,缺乏直接证据。
北京大学心理与认知科学学院朱露莎课题组日前将决策神经科学、计算语言学以及博弈论等多学科研究方法相结合,为这一难题开辟了新的定量研究的思路。该研究发现,人类大脑通过灵活、自动、理性地模拟他人的合作行为,来推断交流信号的潜在含义。这一过程可以在数学上描述为一个基于逆向推理的归因过程,该推理过程所需的几种关键的认知变量由腹内侧前额叶和纹状体的活动定量表征,为理解社会交流提供了一个简单、可扩充的认知神经模型。
利用功能性磁共振成像与计算建模等技术手段,研究者在经典的“指代博弈” [2]中探索了人们推断言外之意的神经计算机制。与常见的“你说我猜”游戏类似,在该实验中,信号发送方(说话人)需要选择颜色或形状来指代一个目标物体,而信号接收方(听众)则需要通过接收到的信号来推断目标物体。
在上图的例子中,如果一个“合作的”说话人想指代蓝色的方形,那么他更可能会说“方形”来帮助听众理解其用意。因此,当听众接收到“蓝色”这个词时,听众便可以猜测,说话人希望指代的应该是蓝色的圆形,而不是蓝色的方形。这一推理需要听众站在说话人的角度,模拟和评估说话人为帮助听众理解某用意而选择某行为的可能性(合作行为),然后由接收到的“果”(交流信号)来反推可能对应的“因”(说话人的意图) [2, 3]。
那么,听众的大脑是否也采用了类似的“逆向推理”算法来推断说话人的意图呢?研究者发现,听众大脑的腹内侧前额叶可能是一个理性交流信号的“模拟生成器”,灵活且定量地表征了说话人采取各种合作行为的条件概率(例如,为了指代蓝色圆形而选择“蓝色”这个词的可能性)。
有趣的是,在有些情况下,听众无需推理,可以由字面含义获知对方的意图(如下图例子),听众的腹内侧前额叶仍然稳定地表征了这一内部模拟信号,意味着对交流伙伴的模拟也许是一个自动的神经加工过程。同时,腹内侧前额叶的信号可能投射到双侧纹状体,在纹状体中以类似于预期误差的形式来更新对他人交流意图的判断,和以贝叶斯为代表的逆向推理计算模型高度吻合,说明了交流意图推断的潜在神经机制。
长久以来,哲学、语言学、认知科学等领域都对交流中是否存在合作、如何实现合作存在极大分歧,这一研究结果为基于合作原则的理性选择假说提供了直接的神经证据。该框架可以被扩展到更加复杂的自然语言交流,更加广阔的社会知觉与人际决策领域中,用以探索大脑对社会信号编码和解码。理解言外之意也是人工智能领域开发真实情景下人机交互工具、进行自然语言处理面临的一大挑战。刻画交流意图推断的神经计算机制、探索大脑策略性合作的算法,对让人工智能理解幽默、懂得讽刺、实现有效交流具有启发意义。
研究结果于2021年3月3日在线发表于Science Advances。北京大学前沿交叉学科研究院博士研究生米青天为该论文第一作者,北京大学心理与认知科学学院、麦戈文脑研究所以及生命科学联合中心研究员朱露莎为该文通讯作者,北京大学博士研究生王聪以及加州理工学院Colin F. Camerer参与了该工作。该研究得到了国家自然科学基金委、北大-清华生命科学联合中心的资助。
参考文献
[1] Grice, H. P. (1975). Logic and Conversation. In P. Cole & J. L. Morgan (Eds.), Syntax and Semantics (Vol. 3, pp. 41–58). New York: Academic Press.
[2] Goodman, N. D., & Frank, M. C. (2016). Pragmatic language interpretation as probabilistic inference. Trends in Cognitive Sciences, 20(11), 818–829.
[3] Friston, K. J., Parr, T., Yufik, Y., Sajid, N., Price, C. J., & Holmes, E. (2020). Generative models, linguistic communication and active inference. Neuroscience and Biobehavioral Reviews, 118, 42–64.
论文链接:https://advances.sciencemag.org/content/7/10/eabe6276
删除或更新信息,请邮件至freekaoyan#163.com(#换成@)
弦外音?言外意?朱露莎课题组揭示交流推理的神经计算机制
本站小编 Free考研考试/2021-12-20
相关话题/交流 信号 神经 社会 计算
心理与认知科学学罗欢课题组和合作者开发操控人脑工作记忆的“动态扰动”新范式并建立神经网络动力学模型
工作记忆指对外界信息的短暂存储和操作能力,是脑认知核心功能。记住和拨打一个新号码,和朋友聊天,听一场讲座,都需要工作记忆的参与。心理与认知科学学院、麦戈文脑研究所罗欢研究员课题组在以往发现基础上,成功开发出一种全新“动态扰动”行为范式,通过在记忆保持阶段呈现有特定时间关系的多个动态亮度序列对人类序列 ...北京大学通知公告 本站小编 Free考研考试 2021-12-20生命科学学院朱健课题组揭示Hedgehog信号途径稳态调控新机制
生命科学学院膜生物学国家重点实验室朱健研究员北京大学生命科学学院朱健课题组2021年2月1日在JournalofCellBiology发表了题为“Competitionbetweentwophosphatasesfine-tunesHedgehogsignaling”的研究论文。该项研究发现了磷酸酶 ...北京大学通知公告 本站小编 Free考研考试 2021-12-20新材料学院有机光电团队在《自然·通讯》发文展示首个由三相交流电直接驱动的电致发光器件
柔性电子近年来引起了全世界的研究热潮,其中电致发光器件在柔性电子中具有广泛的应用。然而目前的电致发光器件大多功能单一,封闭的器件结构导致很难集成传感功能以满足物联网时代对发光器件智能性的要求。除此之外,电致发光器件大多采用直流电或单相交流电驱动,这样的器件接入到三相电网中需要复杂的后端电路,额外消耗 ...北京大学通知公告 本站小编 Free考研考试 2021-12-20未来技术学院肖瑞平课题组在Molecular Cell报道高糖抑制AMPK信号通路的分子机制
AMPK是调节生物能量代谢的核心分子之一,是治疗代谢疾病的重要靶点。AMPK感知细胞代谢状况,葡萄糖、ATP等缺乏引起AMPK激活1,促进细胞中能量的产生,并抑制各种消耗能量的生理过程,从而维持细胞的代谢稳态。但是人们对于抑制AMPK活性的负调节机制却知之甚少,缺乏对于AMPK信号通路调控方式的全面 ...北京大学通知公告 本站小编 Free考研考试 2021-12-20孟祥芝课题组与合作者在eLife发表论文 揭示受书写系统及阅读能力调节的中法儿童跨语言普遍的阅读神经回路
人类进化史上,文字的产生使得口耳相传的知识和经验得以记录和传承。文字符号的设计规则、文字符号与语言间(音义)的对应关系在不同文化中千差万别,但其本质都是通过视觉符号传递语言信息。在纷繁的文字系统背后,是否存在普遍的核心阅读神经回路,此神经网络如何表达来自不同语言文字系统的阅读经验。这一直是心理学和认 ...北京大学通知公告 本站小编 Free考研考试 2021-12-20生命科学学院张哲/杨竞课题组共同揭示NAD+介导的神经细胞“杀手”Sarm1蛋白的活性调节机制
病理性轴突退行(Pathologicalaxonaldegeneration)是神经系统疾病中常见的一种病理变化,表现为轴突肿胀、碎裂和萎缩等。轴突退行能够进一步导致神经细胞胞体的死亡和退化,从而与各种神经退行性疾病的发生密切相关,比如,阿尔兹海默症、帕金森症等中枢神经系统疾病,以及化疗和糖尿病引起 ...北京大学通知公告 本站小编 Free考研考试 2021-12-20北京大学钙信号研究团队成功开发心脏肌质网钙信号成像新技术
2020年10月13日,北京大学钙信号研究团队在心脏领域顶级期刊Circulation在线发表了题为“ImagingSarcoplasmicReticulumCa2+SignalinginIntactCardiacMyocytes”的通讯论文。该论文提供了一种新颖通用的实验策略,实现了在生理条件下对 ...北京大学通知公告 本站小编 Free考研考试 2021-12-20新一代乙酰胆碱探针实现体内乙酰胆碱信号的精确解析
神经系统实现复杂行为背后,不同神经元之间如何进行有效地信息传递和整合,以及信息传递的异常是否导致特定疾病的发生,均是神经生物学领域的关键问题。乙酰胆碱作为经典的神经递质,是神经元之间信息沟通的关键媒介分子,其参与了生长发育、感知及运动、心血管功能、高级认知如学习记忆等诸多重要生理功能的调控1-3。由 ...北京大学通知公告 本站小编 Free考研考试 2021-12-20宋慧超及合作者在LHC 能区p-Pb碰撞小系统QGP信号研究方向取得重要进展
夸克胶子等离子体(QGP)是强相互作用物质的解禁闭相,它曾经存在于早期的宇宙,也有可能存在于中子星内部。高能核核碰撞可以在瞬间产生QGP所需要的极端条件,揭示高温高密下强相互作用物质的相变和性质,并帮助人们近一步认识宇宙极早期的演化。在传统的相对论重离子碰撞中(例如200AGeV的Au-Au碰撞), ...北京大学通知公告 本站小编 Free考研考试 2021-12-20信息学院计算机科学技术系杨智课题组两篇论文被顶级国际会议OSDI 2020接收
日前,北京大学信息科学技术学院计算机科学技术系网络与信息系统研究所杨智副研究员课题组在深度学习编译优化和资源管理方面双双取得重要突破,相关成果以学术论文“Rammer:EnablingHolisticDeepLearningCompilerOptimizationswithrTasks”和“Hive ...北京大学通知公告 本站小编 Free考研考试 2021-12-20