★ 2
arXiv 发布 TFI 基准：评测大模型类型学特征归纳能力
论文提出类型学特征归纳（TFI）基准，给定未命名语言的句子与已知枢轴语言译文，要求模型预测该语言的类型学特征，覆盖 195 种语言。实验发现大模型仅凭 16 个句对就能识别 59-80% 的语言，打乱译文几乎不影响准确率，说明其依赖先验知识。对无法识别的语言，开源模型均未超过多数值基线，表明现有模…
arXiv NLP14 小时前
共 1 篇相关资讯，按重要度与时间排序，每 3 小时更新。
论文提出类型学特征归纳（TFI）基准，给定未命名语言的句子与已知枢轴语言译文，要求模型预测该语言的类型学特征，覆盖 195 种语言。实验发现大模型仅凭 16 个句对就能识别 59-80% 的语言，打乱译文几乎不影响准确率，说明其依赖先验知识。对无法识别的语言，开源模型均未超过多数值基线，表明现有模…