★ 3
LLM 智能体框架的计算成本理论
论文提出语言模型智能体机器（LAM），一种资源受限抽象，在固定底层语义模型的同时显式计入框架层资源开销。研究给出通信、访问、重计算与可靠性四类结果，包括上下文—内存流量的 I/O 下界、随机与非推测顺序访问的 Θ(n) 差距，以及带闭式最优验证间隔的检查点定律。作者在 GPT-6 Astra 上做…
arXiv cs.LG28 天前
#检查点
共 4 篇相关资讯，按重要度与时间排序，每 3 小时更新。
★ 3
Witness Overlap：开放权重模型的方向性溯源
开放权重模型常被微调、对齐、合并后重新发布，现有溯源方法多为对称比较，只能判断相关性而无法确定谁先谁后。论文提出 Witness Overlap，引入同族第三个检查点作为「见证者」，通过比较两端点周围的局部几何来推断方向，无需提示与训练。在 16 个模型家族、176 个 LLM 检查点上，单见证测…
arXiv cs.AI34 天前
★ 2
ULPack：检查点轨迹的参考条件无损压缩编解码器
论文提出 ULPack，利用参考权重指数可预测有序浮点空间中位移位长这一特性，对有序整数残差的熵模型做参考条件化，实现检查点轨迹的无损压缩。在 bfloat16、float16、float32 轨迹上，相比 ZipNN 最高减少 27% 存储，相比 zstd-19 减少 21%，相比 FM-Del…
arXiv cs.LG19 天前
★ 2
RippleCP：衡量编程智能体反事实检查点优势
论文提出反事实检查点优势概念，即对候选检查点而非跳过它所带来的未来恢复成本降低，并通过驱动 CP 分支与 SKIP 分支到同一逻辑失败进行测量。在 12 项 SWE-bench Verified 任务和 106 条真实恢复分支上，检查点每任务节省 49.4 秒，但收益分为相差两个数量级的两种情形。…
arXiv cs.AI25 天前
这个主题的相关资产
相关公司OpenAI1