最新研究揭示视觉模型与人脑的对齐机制_全国资讯网(第一时间发布热点话题娱乐平台)

最新研究揭示视觉模型与人脑的对齐机制


最新研究揭示视觉模型与人脑的对齐机制

  2025-09-02 18:25:24     简体|繁體
http://weixin.993113.com/1087152.html

炒股就看金麒麟分析师研报,权威,专业,及时,全面,助您挖掘潜力主题机会!

(来源:量子位)

AI看世界的方式,与人类大脑保持一致。

但究竟是什么因素驱动了这种脑-模型相似性,至今仍缺乏清晰认识。

为此,FAIR与巴黎高等师范学院通过训练自监督视觉Transformer模型(DINOv3),并使用功能性磁共振成像(fMRI)和脑磁图(MEG)从不同指标评估脑-模型相似性。

结果发现,模型大小、训练数据量和图像类型都会影响模型与大脑的相似度,而且这些因素之间还有相互作用。

特别是,规模最大、训练量最多,并使用人类相关图像训练的DINOv3模型,在脑相似性评分最高。

研究还发现,类脑表征在AI模型中的出现遵循特定的时间顺序:模型先对齐人类早期感觉皮层表征,而要像大脑的高层区域(例如前额叶)一样处理信息,则需更多训练数据。

这一发展轨迹与人类大脑皮层的结构与功能特性高度一致。模型在训练后期学到的表征,恰好对应大脑中发育最晚、最厚、髓鞘最少、处理速度最慢的区域。

DINOV3学到的与大脑一致

DINOv3是一种自监督视觉Transformer模型,已在17亿张自然图像上进行训练。

为了进行全面评估,研究人员从零训练了DINOv3模型的8个变体,以覆盖不同的模型规模、训练数据量和数据类型。

为了对比不同类型图像对模型训练的效果,研究者重新训练了三种DINOv3模型,分别使用人类中心图像、细胞图像和卫星图像,且每类图像数量均为1000万张。

在评估DINOv3模型与人类大脑视觉表征的相似度时,研究从功能性磁共振成像(fMRI)和脑磁图(MEG)中筛选出15个具有代表性的感兴趣区域(ROIs),覆盖从低级视觉皮层到高级前额叶皮层的完整视觉加工层级。

结果显示,随着训练的进行,DINOv3学到的表征会逐步与人脑的表征相一致。

其次,DINOv3学会的这种表征层级,与大脑中的空间层级和时间层级相对应。

为了继续探究DINOv3中类脑表征的出现,研究人员在DINOv3每个选定训练步骤上评估编码评分、空间评分和时间评分,并用“半达时间”总结其发展速度,即达到最终评分一半所对应的训练步骤。

令人惊讶的是,这些编码、空间和时间相关的评分都会在训练过程中出现,但出现的速度各不相同。

低级视觉区表征通常在DINOv3训练的早期就获得,而要学到与前额叶皮层类似的表征,则需要更多的训练。

其次是模型大小,更大的模型在训练中更快表现出类脑特征,脑评分更高,尤其是在高级脑区表现明显。

最后是图像类型,即使只使用卫星图像或细胞图像训练的模型,也能显著捕捉到脑信号,但使用人类中心图像训练的模型在所有脑区的编码效果更高。

这一结果可能是因为人类中心图像更接近大脑日常接触的视觉输入,而卫星图像和细胞图像则是大脑未经过训练处理的图像类型。

为探讨类脑表征与皮层的关系,研究人员分析了编码半达时间与皮层四种特性的相关性。

1、皮层扩展:他们比较婴儿与成人皮层结构的图谱,发现半达时间与皮层扩展高度正相关。这表明发育增长较大的皮层区域,其在AI模型中对应的表征出现较晚。

2、皮层厚度:皮层较厚的区域半达时间更长。

3、皮层动力学:内在动力学最慢的区域也往往具有最长的半达时间,即DINOv3的深层表征通常对应大脑反应较慢的区域。

4、皮层髓鞘:髓鞘可加快神经信号传导,其浓度与半达时间呈显著负相关,说明髓鞘浓度越高,表征出现越早。

论文链接:https://arxiv.org/abs/2508.18226

参考链接:https://x.com/JeanRemiKing/status/1962453435199983982

海量资讯、精准解读,尽在新浪财经APP

编辑: 来源:

分享到:

  • 上一篇
    下一篇

  • 最新动态|成功案例|一览天下|尽收眼底

    全国资讯网(第一时间发布热点话题娱乐平台)
    手机查看(二维码扫一扫)

    全国资讯网,分享全球新闻、热点资讯的实事报道门户,即时提供实用的致富创业项目、资讯新闻、金融投资、竞技游戏、健康教育、电商直播、微商指南、生活常识、公正的项目评鉴,实用性佳、内容社区。

    最新资讯

    [开户代运营]抖音教育直开通投拉满,长期稳定,有考研,专升本,大专院校招生,成人学历,
  • 2025-09-03 01:03:43

     

    [开户代运营]各类医疗器械(前列腺,骨科,止咳,血糖等)人力加白户(单包资质),电商培训,股票等
  • 2025-09-03 00:54:40

     

    [代运营托管]个债全平台源头切量
  • 2025-09-03 00:45:36

     

    [开户代运营]千万官方流量,承接全国各行业,多重标签定向,精准推送给潜在人群,提供朋友圈广告投放
  • 2025-09-03 00:36:33

     

    [开户代运营] 视频号治疗仪 ,小护士,熊胆粉 ,美容课 , 泡酒瓶 ,六宝地黄饮 ,注册65+
  • 2025-09-03 00:27:30

     

    [开户代运营]百度(baidu) 巨量金融引流 nk芬
  • 2025-09-03 00:18:27

     

    [开户代运营]疝气,血糖,关节肽,失眠肽,打回0.8-1:1, 一手源头量
  • 2025-09-03 00:09:24

     

    [开户代运营]抖音公积金 车抵 房抵 综合信贷,量大质量优,价格低,欢迎老板来聊
  • 2025-09-03 00:00:20

     

    懂球帝2025赛季中超第23轮MVP:卡扎伊什维利
  • 2025-09-02 23:51:17

     

    这回体检过了!HWG!不莱梅租借药厂前锋博尼法斯!看集锦
  • 2025-09-02 23:42:17

     

    [代运营托管]磷虾油,疝气,血糖,祛湿,瑶浴,失眠,优质软文加粉,稳定输出中,需要的老板,来私
  • 2025-09-02 23:33:11

     

    [开户代运营]快手全行业信息流推广,代运营
  • 2025-09-02 23:24:07

     

    [代运营托管]祛斑百度(baidu)粉,软文质量好,开单率百12
  • 2025-09-02 23:15:04

     

    [代运营托管]AD+本地推珠宝成品起量端口,欢迎咨询
  • 2025-09-02 23:06:01

     

    [代运营托管]品 牌广告24现金点千川公3快手cid8本地推新客40+ad信息流7
  • 2025-09-02 22:56:58