★ 3
TARGRS:基于转移感知奖励引导表征采样的 LLM 去毒方法
研究者提出 TARGRS,在隐表征空间学习毒性转移的奖励引导,实现测试时去毒。在 10 个 LLM 与三个毒性基准上优于现有方法,RealToxicityPrompts 上毒性最高降低 69.38%,速度接近原模型,并可扩展至大型视觉语言模型,毒性最高降低 64.23%。
arXiv cs.AI4 小时前
共 1 篇相关资讯,按重要度与时间排序,每 3 小时更新。
研究者提出 TARGRS,在隐表征空间学习毒性转移的奖励引导,实现测试时去毒。在 10 个 LLM 与三个毒性基准上优于现有方法,RealToxicityPrompts 上毒性最高降低 69.38%,速度接近原模型,并可扩展至大型视觉语言模型,毒性最高降低 64.23%。