★ 2
arXiv 论文提出 Beta 混合模型降低 AI 评测采样成本
一篇 arXiv 论文提出用 Beta 分布混合模型(按 BIC 选择分量数、边际极大似然拟合)来估计 AI 系统的 Pass@k、Pass^k 与 AUC@k 等指标,并给出无需额外模型调用的 delta 法置信区间。在竞赛数学与研究生级科学基准上,该方法在超出实际试验次数的外推场景下比朴素估计…
arXiv cs.AI10 小时前
共 1 篇相关资讯,按重要度与时间排序,每 3 小时更新。
一篇 arXiv 论文提出用 Beta 分布混合模型(按 BIC 选择分量数、边际极大似然拟合)来估计 AI 系统的 Pass@k、Pass^k 与 AUC@k 等指标,并给出无需额外模型调用的 delta 法置信区间。在竞赛数学与研究生级科学基准上,该方法在超出实际试验次数的外推场景下比朴素估计…