科研人员提出新型神经网络框架

文章导读
你是不是也在为“AI看得见、却不懂意思”犯愁?当模型能准确识别物体却总在语义理解上出错,很多人只想到更大、更深的网络,但忽略了“概念”这个中间层。最新研究提出的CATS Net正是针对这个盲区:它把高维感知压缩成低维的概念向量,再用分层门控像“钥匙”一样激活任务模块,能自发生成并对齐不同网络的概念空间。实测还显示,这些概念向量在表征上竟与人类大脑的视觉语义活动高度相似——换句话说,不只是工程技巧,而是一种可能接近人类认知的计算框架。但这里有两个要命的问题没人直接回答:这种“类人概念”能在开放环境下长期稳定泛化吗?以及,当不同系统互传概念向量时,会不会带来新的误解或偏差?
— 内容由好学术AI分析文章内容生成,仅供参考。
人类智能的独特之处在于能够从感官体验中抽象出概念,从而在概念空间进行思考和交流。这种将高维感知“压缩”为低维概念,再由概念“重构”感知的双向过程,构成了人类符号化思维的基础。但是,当前人工智能系统却难以实现这一过程。
近日,中国科学院自动化研究所团队等,提出了新型神经网络框架CATS Net,实现了类人的概念形成、理解和交流。这一成果为理解人类的概念认知提供了计算模型,并为建立具有类人概念智能的人工智能系统打下了基础。
CATS Net包含概念抽象(CA)模块与任务求解(TS)模块。在处理视觉任务时,CA模块能够自发地将高维的视觉输入压缩成紧凑的低维“概念向量”。随后,这些概念向量如同开锁的“钥匙”一般,通过分层门控机制产生一系列“开关”信号,能够动态调节TS模块的神经网络活动,高效灵活地指导系统完成特定的视觉感知任务。系统可以根据与环境的互动自主生成大量新概念,形成自己的概念空间。当不同的神经网络所生成的概念空间对齐后,可以直接通过概念向量在网络间传递知识。这些能力再现了人脑的概念生成、理解和交流。
团队进一步将CATS Net自发形成的概念表征与人类的概念空间和神经活动数据进行对比。功能磁共振成像的表征相似性分析显示,CATS Net生成的概念空间与心理学上的人类认知语义模型一致,其表征模式还与人类大脑中负责视觉语义表征的腹侧枕颞皮层活动模式相关。同时,CA模块的动态门控机制与脑中负责概念提取与操控的语义控制网络活动模式吻合。这表明CATS Net在功能层面模拟了人类的概念认知,并在机制层面揭示了人脑概念形成与理解的计算原理。
该工作为研发具备人类概念形成与应用能力的下一代智能系统奠定了基础。
相关研究成果在线发表在《自然-计算科学》(Nature Computational Science)上。研究工作得到国家自然科学基金和中国科学院相关项目等的支持。
© 版权声明
本文由分享者转载或发布,内容仅供学习和交流,版权归原文作者所有。如有侵权,请留言联系更正或删除。

















之前搞过类似的模型压缩,感觉门控机制这块儿设计得挺巧妙的。
看不懂,但感觉很厉害的样子。
这种概念向量跟认知心理学里说的原型理论像不像啊?
听起来挺玄乎的,真能实现吗?
这玩意真能像人一样想东西?🤔