arXiv cs.AI· Moonwon Choi, Kisung Nam, Seunggeun Lee·· 1 天前AI 评分39
利用重复评分预测局部代理优化下的人类收益曲线
Predicting Human-Gain Curves under Local Proxy Optimization from Repeated Ratings
AI 导读
研究人员提出优化前诊断方法 PACE，利用重复人类评分预测固定代理目标在不同优化强度下的人类感知收益曲线。该方法将代理优化建模为 KL 正则化指数倾斜，通过一阶对齐度与二阶修正项 $A\sqrt{d}+Bd$ 近似局部收益。在 SummEval、WMT MQM 及 GPT-4o 评判等基准测试中，PACE 持续降低收益预测误差，并通过 LoRA-DPO 实验连接了实际优化。
来源：arXiv cs.AI · arxiv.org