★ 3
PAU基准测试黑盒API交互理解能力
论文提出PAU基准,让模型仅通过黑盒API级访问与探索性输入来理解Python代码片段的功能,研究无监督工具理解问题。即便前沿模型表现也不佳,最强的Claude-4-Opus在超过45%的测试集上失败,常见错误是过度自信导致探索不足与过早终止。借鉴非对称演员评论家范式后训练,Qwen3-8B可匹配…
arXiv cs.AI34 天前
共 3 篇相关资讯,按重要度与时间排序,每 3 小时更新。
论文提出PAU基准,让模型仅通过黑盒API级访问与探索性输入来理解Python代码片段的功能,研究无监督工具理解问题。即便前沿模型表现也不佳,最强的Claude-4-Opus在超过45%的测试集上失败,常见错误是过度自信导致探索不足与过早终止。借鉴非对称演员评论家范式后训练,Qwen3-8B可匹配…
一则技术讨论探讨 AI 能否基于源代码自动生成产品演示视频,核心难点在于理解应用工作流、识别有意义的 UI 状态,以及让动画与旁白同步。该问题涉及代码理解与多模态生成的结合。
开发者发布开源项目 Sóþspell,用 LLM 对任意 git 仓库做自上而下的「电影式」代码讲解,配有旁白、动态架构图和代码高亮联动。用户可随时暂停提问而不丢失进度,支持浏览器语音与 ElevenLabs 云语音,并提供 OpenCode 插件。