★ 3
流递归模型 SRM:面向可解释性的架构
论文提出流递归模型(SRM),对分层推理模型(HRM)进行改造,将计算组织为多个相互作用的潜在流并通过递归精炼更新,从而直接分析流动态、因果贡献与路由行为。SRM 在每参数性能上与 GPT-2 相当,并展现出结构化的流专业化与交互,为可扩展的机制可解释性提供架构基础。
arXiv cs.LG38 天前
共 1 篇相关资讯,按重要度与时间排序,每 3 小时更新。
论文提出流递归模型(SRM),对分层推理模型(HRM)进行改造,将计算组织为多个相互作用的潜在流并通过递归精炼更新,从而直接分析流动态、因果贡献与路由行为。SRM 在每参数性能上与 GPT-2 相当,并展现出结构化的流专业化与交互,为可扩展的机制可解释性提供架构基础。