★ 3
BMMS 评测：GPT-4o 违反自家 Model Spec 硬约束达 70.7%
论文提出行为错位度量套件 BMMS，以政策文档为输入输出合规画像，含合规达成分 CAS、合规鲁棒裕度 CRM 等指标。在来自 11 份文档的 1003 条义务上，抽取保真度达 94.6%。实测显示 GPT-4o 违反 OpenAI Model Spec 中约束它的硬性条款达 70.7%，而两个 C…
arXiv cs.AI10 小时前
共 1 篇相关资讯，按重要度与时间排序，每 3 小时更新。
论文提出行为错位度量套件 BMMS，以政策文档为输入输出合规画像，含合规达成分 CAS、合规鲁棒裕度 CRM 等指标。在来自 11 份文档的 1003 条义务上，抽取保真度达 94.6%。实测显示 GPT-4o 违反 OpenAI Model Spec 中约束它的硬性条款达 70.7%，而两个 C…