arXiv提出COMPASS评估多模态模型兼容性

发生了什么

据arXiv cs.CL论文《To Align or Not To Align: Check Your COMPASS Before You Train》提出，COMPASS是一种训练前评估多模态模型合并兼容性的诊断方法。该方法基于局部邻域表征收敛的观察，将兼容性分解为成对易用性（k-NN重叠）和范式级上限两个可计算轴。在72项跨模态对齐实验和392项任务算术模型合并中，COMPASS估计值与下游成功率强相关，跨模态对齐任务平均Pearson相关系数为0.91，模型合并为0.70。