心理与认知科学学院毕彦超课题组合作提出新型神经网络框架CATS Net,实现类人概念形成、理解与交流

北京大学
发布时间: 26次浏览

人类智能的一个独特能力,是能够从感官体验中抽象出概念,从而脱离直接的感官输入,在概念空间中思考与交流。一般认为,将高维感知“压缩”为低维概念、再由概念“重构”感知的双向过程,构成了人类符号化思维的基础,并进一步支持了语言的产生。然而,当前的人工智能(AI)系统却难以实现这一过程:传统深度网络往往将知识纠缠在海量参数之中,难以提取出独立的概念;而近年来备受关注的大语言模型则高度依赖人类既有的语言符号进行训练,无法真正“从无到有”地从感知经验中自发形成概念。如何在计算系统中实现类人的概念形成,是认知科学和人工智能领域中的核心问题。a3n知多少教育网-记录每日最新科研教育资讯

近日,北京大学心理与认知科学学院毕彦超课题组与中国科学院自动化研究所余山课题组合作,在《自然·计算科学》(Nature Computational Science)在线发表题为“A neural network for modeling human concept formation, understanding and communication”的研究论文。该研究提出一种新型神经网络框架CATS Net,系统模拟了概念形成、概念理解和概念交流三个核心过程。研究发现,神经网络可以从感知经验中自发形成结构化的概念空间,且这一概念空间与人类语义空间和人脑神经表征具有显著对应关系,为理解人类概念认知提供了新的计算模型,也为构建具备类人概念智能的人工智能系统提供了重要基础。a3n知多少教育网-记录每日最新科研教育资讯

a3n知多少教育网-记录每日最新科研教育资讯

图1 CATS Net模型框架示意a3n知多少教育网-记录每日最新科研教育资讯

为解决这一问题,研究团队提出了CATS Net,即概念抽象与任务求解双模块神经网络。该模型包含两个核心组成部分:概念抽象模块(Concept Abstraction,CA)和任务求解模块(Task Solving,TS)。在视觉任务中,CA模块能够将高维视觉输入压缩为紧凑的低维概念向量;这些概念向量随后通过分层门控机制调节TS模块的神经网络活动,使模型能够根据当前概念灵活完成相应的视觉判断任务。a3n知多少教育网-记录每日最新科研教育资讯

这一过程模拟了人类概念认知中的两个关键环节:一方面,个体可以从感知经验中抽象出概念;另一方面,概念又可以反过来调节感知和行为,使系统能够根据“正在使用的概念”选择性地处理相关信息。a3n知多少教育网-记录每日最新科研教育资讯

a3n知多少教育网-记录每日最新科研教育资讯

图2 CATS Net自发形成的概念空间与人类语义模型的对齐a3n知多少教育网-记录每日最新科研教育资讯

研究发现,CATS Net可以在与环境交互的过程中自主形成大量新概念,并组织出结构化的概念空间。进一步地,当不同神经网络形成的概念空间被对齐后,模型之间可以不再依赖外部环境重新学习,而是直接通过概念向量传递知识。这一过程模拟了人类通过语言等符号系统进行概念交流的核心机制。a3n知多少教育网-记录每日最新科研教育资讯

a3n知多少教育网-记录每日最新科研教育资讯

图3 独立训练的CATS Net之间的概念交流a3n知多少教育网-记录每日最新科研教育资讯

研究团队进一步将CATS Net形成的概念表征与人类认知语义模型及脑成像数据进行比较。基于功能磁共振成像(fMRI)的表征相似性分析显示,CATS Net自发形成的概念空间与人类语义空间具有显著相似性,并与人脑腹侧枕颞皮层中视觉语义表征的活动模式显著相关。同时,模型中CA模块的动态门控机制与人脑语义控制网络的活动模式相吻合,提示该模型不仅在功能层面模拟了人类的概念形成和理解,也在机制层面为人脑概念认知提供了可能的计算解释:概念并不是静态储存在系统中的标签,而是可以通过动态门控机制调节神经网络的信息处理过程。a3n知多少教育网-记录每日最新科研教育资讯

4.pnga3n知多少教育网-记录每日最新科研教育资讯

图4 CATS Net概念表征与人脑语义表征、语义控制网络的对应关系a3n知多少教育网-记录每日最新科研教育资讯

该研究为理解人类如何从感知经验中形成概念、如何利用概念指导认知行为以及如何通过符号进行概念交流提供了统一的计算框架。与此同时,该工作也为发展具备自主概念形成能力的新一代人工智能系统奠定了基础。未来,如果人工智能系统能够超越人类已有语言范畴,自主形成新的概念结构,将有望在科学发现、复杂环境适应和开放式知识学习等领域发挥重要作用。a3n知多少教育网-记录每日最新科研教育资讯

本研究的共同第一作者为中国科学院自动化研究所博士研究生郭良轩、北京大学博士研究生陈昊扬及中国科学院自动化研究所陈阳副研究员;余山、毕彦超与陈阳为共同通讯作者。研究得到中国科学院、国家自然科学基金委及科技部等的支持。a3n知多少教育网-记录每日最新科研教育资讯

本文链接:http://knowith.com/news-3-5920.html心理与认知科学学院毕彦超课题组合作提出新型神经网络框架CATS Net,实现类人概念形成、理解与交流

声明:本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。

热门文章

延伸阅读

相关阅读

2024年新高考赋分表 广东省赋分标准
2024年新高考赋分表如下: 根据新高考赋分制度,考生在各科目考试中取得的成绩将分为四个等级:A、B、C和D。其中,A等级是最高等级,考生获得A等级的成绩将获得5分的赋分;B等级是次高等级,考生获得B等级的成绩将获得4
山西省太原市有哪些艺考培训机构
山西省太原市有哪些艺考培训机构很多朋友对这方面很关心,整理了相关文章,供大家参考,一起来看一下吧! 太原艺考培训机构排行榜前十如下: 1、太原舒曼艺术学校:自舒曼开办教学以来已经有16个年头,所
2024年高考分数线大概是多少?
2024年高考分数线大概是多少?很多朋友对这方面很关心,整理了相关文章,供大家参考,一起来看一下吧! 2024年高考分数线大概是多少? 背景介绍 高考是每个学生都会经历的大事,其中最关心的当属分数线。毕
2024年北京高考人数(北京高考2023年人数)
2024年北京高考人数(北京高考2023年人数)相关内容,小编在这里做了整理,希望能对大家有所帮助,关于2024年北京高考人数(北京高考2023年人数)信息,一起来了解一下吧! 2024年高考人数可能突破1300万。
2024年艺考生新政策 2024年美术高考政策
今天小编整理了2024年艺考生新政策 2024年美术高考政策相关信息,希望在这方面能够更好帮助到大家。 2024年艺考改革政策如下 一、统考加强、校考诚少 1.严格控制校考范围和规模
山东春考本科大学有哪些?
今天小编整理了山东春考本科大学有哪些?相关信息,希望在这方面能够更好帮助到大家。 山东春季高考本科大学录取分数线如下 1、专业类别:现代农艺,分数线:533分。 2、专业类别:食品加工,分

热点精选

最新推荐

您可能感兴趣