HF Daily Papers·· 8 天前AI 评分30
DTCA:扩散语言模型强化学习中的去噪 Token 信用分配框架
DTCA: Denoising Token Credit Assignment for Reinforcement Learning in Diffusion Language Models
AI 导读
研究提出 DTCA 框架,利用置信度提升与熵校准在扩散语言模型强化学习中实现 token 级信用分配,提升数学推理表现。基于 LLaDA-8B-Instruct 的实验显示,DTCA 在不同生成预算下均改善数学推理,较基础模型在 MATH500 最高提升 9.0 分、在 GSM8K 最高提升 5.3 分。
来源:HF Daily Papers · huggingface.co