LegalRewardBench：首个法律领域奖励模型人类核验基准发布

arXiv 论文提出 LegalRewardBench，称其为首个经人类核验的法律领域奖励模型评测基准，将法律偏好评估划分为知识、理解、分析、决策、写作五个能力层级，偏好样本由评分标准引导的自动评判结合人工核验构建。研究评测了覆盖通用与微调模型、生成式与判别式架构的三类评判模型，结果显示强通用生成式模型目前是最稳健的法律奖励模型，而现有微调奖励模型向法律偏好评估的迁移可靠性较低。