AI与世界难题 · 生命科学 · arXiv · 2026-10-19
面向卡通电影社交与情感理解的脑对齐多模态 LLM
原标题: Brain-Aligned Multimodal LLMs for Social and Emotional Understanding of Cartoon Movies
多模态大语言模型可以大规模标注社会和情感内容,但其与人类判断的一致性,以及对预测大脑反应的价值,仍有待检验。作者将基于扩散的模型和自回归模型,与三部卡通短片中心理理论和情感效价的连续人类评分进行了比较。模型评分捕捉到了人类时间变化的部分特征,其中与效价的一致性强于与心理理论的一致性;在其中一部影片中,被模型评分显著编码的脑区多于被人类评分显著编码的脑区,而两者之间的重叠有限。