大模型arXiv cs.LG4 天前
Same Answer, New Box: How Much of RLVR's Out-of-Domain Gain Is Answer Format?
研究指出,RLVR 在域外任务(如数学训练后 MMLU 提升)上的增益很大程度是答案格式变化而非能力提升。用公开答案提取器评分时,82% 的域外选择题增益在改用能读取文本或 \boxed{} 的提取器后消失:RL 只是把答案移进提取器优先查找的框里。该发现提醒评测结果依赖提取器,可用二次评分低成本验证。
已过时译