论文定性

这篇工作精准戳中LLM多步工具使用强化学习训练“隐性崩溃”的隐蔽痛点，完成从失效归因到修复方案验证的完整实证闭环，是agentic RL训练领域非常扎实的落地型研究。

核心创新与贡献

最大亮点是跳出“RL效果差就是奖励设计问题”的常规思路，首次将多步工具调用RL崩溃的核心诱因精准定位为特定控制token的概率异常尖峰，填补了该场景失效归因的空白，给踩过“训练中途模型突然不会调工具”坑的开发者提供了明确排查方向；同时系统梳理4类监督信号、同步/交错两种训练框架的修复效果，得出“交错SFT+RL可大幅提升训练稳定性，但格式与内容OOD泛化存在短板”的明确结论，为后续研究避坑、方案选型提供了清晰的实证依据，实用性极强。

现存问题与水分

研究局限性清晰：实验仅覆盖小参数模型与简单工具场景，未验证结论在大参数模型、复杂多工具联动场景下的普适性；对控制token概率尖峰的产生机制仅做现象级描述，未深入挖掘其与RL训练动态、模型架构的关联，理论深度不足；OOD泛化差的应对方案仅点到为止，未给出针对性优化路径，整体研究还停留在“发现问题、验证基础修复方案”的层面，距离解决行业核心问题还有提升空间。

维度简评

创新性（5/10）：归因视角有新意但机制挖掘不足，属场景化实证创新，无理论突破；严谨性（6/10）：实验设计完整但覆盖场景有限，结论普适性待验证；重要性（7/10）：解决agentic RL训练高频实际痛点，参考价值明确；清晰度（8/10）：脉络顺畅，可读性极强；可复现性（8/10）：开源代码且实验描述详细，重复难度低。

总评

这是一篇“痛点抓得准、实证做得实、但理论挖得浅、场景覆盖窄”的合格工程研究，为LLM工具使用RL训练稳定性问题提供了扎实的入门级参考，是agent训练领域值得关注的务实工作。