arXiv cs.AI· Yuhang Han, Dingning Liu, Yujie Chen, Yaojie Zhang, Jingwei Song, Zequn Yang, Xuanming Shang, Li Ding, Zhijiang Guo, Linfeng Zhang·· 8 天前AI 评分33
多模态强化学习:从视觉亲和力到学习信用分配
From Visual Affinity to Learning Credit in Multimodal Reinforcement Learning
AI 导读
研究提出插件式框架 Outcome-Conditioned Visual Credit(OVC),将多模态强化学习中的视觉关联度度量与 token 级信用分配解耦。该方法无需辅助奖励模型、过程标注或推理期模块,直接复用现有采样数据调制 token 梯度贡献。在 3 个模型上,其实例化方案使 6 项基准测试平均准确率相较 GSPO 持续提升 1.86-2.39 个百分点。
来源:arXiv cs.AI · arxiv.org