★ 2语言模型作为规范预言机:权重与笔记对比论文探讨语言模型能否作为紧凑的规范预言机,学习目标事实并直接回答问题,并对比外部文本笔记与权重修改两种存储方式。在596事实世界与两种Qwen2.5规模上,权重预言机从结构中获益更大,7B模型在结构化世界上准确率高出18.5个百分点,但存储成本显著更高。arXiv cs.LG48 天前