DINOv3模型

搜索文档
最新研究揭示视觉模型与人脑的对齐机制
量子位· 2025-09-02 04:17
时令 发自 凹非寺 量子位 | 公众号 QbitAI AI看世界的方式,与人类大脑保持一致。 结果发现, 模型大小 、 训练数据量 和 图像类型 都会影响模型与大脑的相似度,而且这些因素之间还有相互作用。 特别是,规模最大、训练量最多,并使用人类相关图像训练的DINOv3模型,在脑相似性评分最高。 研究还发现,类脑表征在AI模型中的出现遵循特定的时间顺序:模型先对齐人类早期感觉皮层表征,而要像大脑的高层区 域(例如前额叶)一样处理信息,则需更多训练数据。 这一发展轨迹与人类大脑皮层的结构与功能特性高度一致。模型在训练后期学到的表征,恰好对应大脑中发育最晚、最 厚、髓鞘最少、处理速度最慢的区域。 但究竟是什么因素驱动了这种 脑-模型相似性 ,至今仍缺乏清晰认识。 为此,FAIR与巴黎高等师范学院通过训练 自监督视觉Transformer模型(DINOv3) ,并使用功能性磁共振成像 (fMRI )和脑磁图(MEG)从不同指标评估脑-模型相似性。 DINOV3学到的与大脑一致 DINOv3是一种自监督视觉Transformer模型,已在17亿张自然图像上进行训练。 为了进行全面评估,研究人员从零训练了DINOv3 ...