★ 3
BILAL-BENCH 发布:评测孟加拉语开源模型编造伊斯兰典籍
研究者推出 240 题专家核验的孟加拉语基准 BILAL-BENCH,覆盖古兰经归属、圣训、教法与对抗性虚假前提。七个 1B 至 120B 开源模型中六个在 79.3-95.3% 的出处生成题上自信编造,且规模增大并无单调改善;圣训出处是最弱类别。
arXiv NLP15 小时前
共 1 篇相关资讯,按重要度与时间排序,每 3 小时更新。
研究者推出 240 题专家核验的孟加拉语基准 BILAL-BENCH,覆盖古兰经归属、圣训、教法与对抗性虚假前提。七个 1B 至 120B 开源模型中六个在 79.3-95.3% 的出处生成题上自信编造,且规模增大并无单调改善;圣训出处是最弱类别。