★ 2
训练 LLM 分类器时的假设失败经验分享
一篇技术文章分享在训练 LLM 分类器过程中遇到的假设失败（negative results）案例，总结哪些设计假设在实际训练中不成立。内容属于工程经验复盘，供开发者参考。
Hacker News – LLM17 天前
#负结果
共 2 篇相关资讯，按重要度与时间排序，每 3 小时更新。
★ 2
SAC 中 tanh 雅可比“解限”的负结果：Bang-Bang 控制与 MetaDrive
论文检验 Soft Actor-Critic 中 tanh 压缩导致雅可比在动作边界消失、可能削弱极端动作信号这一担忧。作者在演员损失中加入一项恢复该信号的干预，但在最小时间双积分器与 MetaDrive 微调任务上均未带来回报提升，无门控旁路还会导致策略饱和并令回报崩溃。结论是雅可比效应真实存在…
arXiv cs.LG53 天前