★ 3
PV-Decoding：扩散模型渐进验证推测解码提速
论文提出 PV-Decoding，一种面向块扩散推理的置信度驱动推测解码框架，用两个置信阈值把掩码位置分为直接解码、推测与未解决三类，并采用渐进式验证策略。在三个扩散语言模型与 GSM8K、MBPP、HumanEval 上，顺序前向次数减少 8%–37%，最大精度下降仅 1.3%。
arXiv NLP13 天前
#置信度
共 11 篇相关资讯，按重要度与时间排序，每 3 小时更新。
★ 3
论文：LLM 语言不确定性表达与人类存在分歧
论文研究大模型在语言不确定性量化上与人类的差异，以及语言标记能否可靠量化模型不确定性。作者从心理学与决策科学文献整理人类不确定性标记语料，发现大模型赋予这些标记的数值水平与人类显著不同。随后提出一种基于优化的算法，直接从模型输出学习标记-不确定性映射，实现标记层面的人机置信语义对比。
arXiv cs.LG31 天前
★ 3
研究：推理集中错误，自一致性无法察觉
研究在五个基准、74944个样本上固定权重仅切换推理模式，发现推理会集中模型的错误：两个独立错误答案重合的概率在全部对比中上升。推理还大幅减少不同答案数量，但同时也缩小了答案多样性可起作用的题目集合。在280种方法-数据集-模型组合中，没有一种置信度加权方法在修正后能胜过简单多数投票。
arXiv cs.AI34 天前
★ 3
研究：语言模型用置信度驱动行为
研究提供了因果层面的证据，表明语言模型会依据自身的置信度来调节其行为输出。这一发现有助于理解模型决策机制，并为提升模型可靠性与校准能力提供理论依据。
Nature Machine Intelligence56 天前
★ 2
arXiv 论文：类型化决策模型置信度审计，Laya 与 Jev 1.13 对比
论文审计类型化决策模型输出的概率是否真能兑现准确率承诺，对比开源权重模型 Laya 五个检查点与仅 API 可用的 Jev 1.13。在 190 次可交换评估中，点估计阈值在 147 次违背承诺，Learn then Test 全部守住。Jev 在 51 个语种中仅 8 个守住 95% 承诺，普通…
arXiv cs.LG5 天前
★ 2
博客：用 LLM 做置信度评分是个坏主意
一篇技术博客论证让大语言模型自评置信度并不可靠，模型输出的概率或分数与实际正确率往往脱节。作者建议改用外部校准与验证手段评估不确定性。
Hacker News – LLM12 天前
★ 2
研究提出预测大模型零样本标注性能的方法
研究构建两个任务族共 461 个文本分类数据集，探讨能否预测大模型在新数据集上的标注表现。结果表明性能可在一定程度上被预测，且与强调模型自述置信度有用性的其他研究相反，内部对数概率是最具预测力的信号。
arXiv NLP13 天前
★ 2
邻域平滑用于神经网络校准
论文提出图平滑作为训练时校准的通用原则，鼓励表示空间中相邻样本具有相似的预测分布，并推导了邻域预测散度与局部置信度变化及校准误差传播之间的界限。所提图正则化器在标准校准基准上提升预测质量，且与温度缩放等事后校准互补。
arXiv cs.LG25 天前
★ 2
对比决策模型作为评判者的评测
论文评测开源对比决策模型CLM-v0.1-8B在公开评判基准上的表现，发现其接近随机水平，在RM-Bench与JudgeBench上与抛硬币无统计差异。同参数量的奖励模型与生成式评判者得分显著更高。校准后置信度可修复，但置信门控级联几乎无法保留项目，说明近随机评判者的校准置信度价值有限。
arXiv cs.LG26 天前
★ 1
Zet：识别AI猜测的置信层
开发者推出 Zet，一个构建在 Jev 与 Laya 之上的层，用于判断 AI 何时在猜测，帮助用户识别模型输出的不确定性。属于 Show HN 早期项目，关注度较低。
Hacker News – AI33 天前
★ 1
Jev AI 交互式决策演示平台
Jev AI 推出在线交互式 Playground，展示类型化决策、置信度与结构化 AI 输出如何协同工作。该工具面向开发者，帮助理解受约束的 AI 决策流程。
Hacker News – AI41 天前
这个主题的相关资产
相关公司OpenAI1