arXiv发布LegalRewardBench法律奖励模型基准

发生了什么

据arXiv论文，研究者推出首个经人工验证的法律领域奖励模型偏好评估基准LegalRewardBench。该基准将评估分为知识、理解、分析、决策和写作五个能力层级，通过规则引导的自动评判结合人工验证构建偏好样本。实验显示，强大的通用生成式模型是目前最稳健的法律奖励模型，而现有微调奖励模型在法律偏好评估中迁移可靠性较低。