The Score Is Not the Structure: Brain Alignment and Cross-Lingual Transfer

ABSTRACT

中文摘要

神经语言模型研究经常把较高的脑对齐分数解释为模型学到了更接近人脑、并且更容易跨语言迁移的内部结构。作者检验这一推断是否成立：使用 Pereira 2018 的 627 个句子 fMRI 基准，将语言网络体素经秩为 128 的主成分压缩后，通过中心核对齐（CKA）微调 Pythia 160M、410M 和 1.4B 模型。优化可把模型—脑 CKA 从约 0.10 提高到 0.34，而估计上限约为 0.54；但当脑目标被随机置换或替换为随机矩阵时，CKA 仍可达到约 0.31，真正超出控制条件的脑特异增量只有 0.028–0.068。作者进一步发现，目标内部的 CKA 下限约为 0.204，并随表示秩与样本数之比变化，说明高分很大程度受有限样本几何约束。最后，脑对齐模型在 BLiMP 句法基准上没有稳定优于匹配控制模型。结果表明，一个较高的对齐分数既不充分证明模型恢复了脑表征结构，也不能自动推出跨语言或语言能力提升；神经对齐必须配合置换、随机目标、秩匹配和行为迁移控制。