on-policy-distillation

从信息不对称、容量间隙到轨迹修正与信号净化：系统复盘 2026 上半年 On-Policy Self-Distillation (OPSD) 的核心痛点与改进工作。

后训练希望学习信号同时准确、稠密、易得，但现实里很难三者兼得。OPD 提供了一种新的组织方式——在学生自己的轨迹上，把教师、验证器、环境反馈组织成密集监督。