研究指商业LLM中文修正结构过度使用

发生了什么

据arXiv cs.CL论文指出，五项商业大语言模型在中文“不是X，而是Y”修正结构中过度使用且缺乏语境适宜性。研究显示，这些模型使用该结构的密度是人工参考文本的2.5至9.2倍。在307个标注用例中，仅1.30%为缺陷用法，52.8%为可选（正确但不必要）用法，表明模型在适宜性方面表现不足。研究认为奖励模型和监督微调倾向于提高该结构频率，呼吁开发更关注表达适宜性的模型。