★ 2
arXiv 发布 BIBIMBAP:BIM 指令式自动编程基准
论文指出大模型正成为建筑信息模型(BIM)的自然语言接口,但缺乏评测其编辑 IFC 能力的基准。作者推出 BIBIMBAP,包含 100 个覆盖增删改查及空间、几何、拓扑等类别的任务,配有自然语言提示、IFC 模型、期望输出与自动测试脚本。基线结果显示最佳仅 50.2%,约束保持与空间推理频繁失败。
arXiv NLP5 小时前
共 1 篇相关资讯,按重要度与时间排序,每 3 小时更新。
论文指出大模型正成为建筑信息模型(BIM)的自然语言接口,但缺乏评测其编辑 IFC 能力的基准。作者推出 BIBIMBAP,包含 100 个覆盖增删改查及空间、几何、拓扑等类别的任务,配有自然语言提示、IFC 模型、期望输出与自动测试脚本。基线结果显示最佳仅 50.2%,约束保持与空间推理频繁失败。