TIPS模型仅凭结果奖励强化学习诱导过程监督
发生了什么
据Hugging Face Papers报道,中国人民大学团队提出TIPS框架,通过仅依赖结果奖励的强化学习训练生成式过程奖励模型(PRM)。该模型生成思维链及步骤标签,奖励仅取决于预测结果是否匹配真值。TIPS-Qwen3-4B-Thinking-2507在ProcessBench上达到85.2 F1,超越GPT-5.4-Instruct等强提示模型,但略逊于o1-mini。
- ProcessBench得分
- 85.2 F1
报道与来源
1 篇发布方数量不等于独立核验数量。同稿的多个入口保留在对应报道中。
- Hugging Face Papers转载
Paper page - Inducing Process Supervision from Outcome-Only Reinforcement Learning
来源关系与证据边界
按已记录的来源角色展示;连线仅表示原生身份流程确认的同稿入口,不表示独立佐证或跨报道引用。
- 来源报道1 个发布入口