★ 3
研究:大模型文化刻板印象检测不可靠,非英语提示更有效
论文系统考察大模型在文化特定刻板印象检测上的表现,变量包括提示语言、指令微调语言与微调数据规模,覆盖美国、荷兰与中国三种文化语境。结果显示模型无法可靠考虑文化语境,且普遍高估刻板印象的存在;非英语提示反而提升文化语境考量与预测效果。额外指令微调可降低误报率,而训练数据规模对检测效果呈非单调影响。
arXiv NLP14 天前
共 1 篇相关资讯,按重要度与时间排序,每 3 小时更新。
论文系统考察大模型在文化特定刻板印象检测上的表现,变量包括提示语言、指令微调语言与微调数据规模,覆盖美国、荷兰与中国三种文化语境。结果显示模型无法可靠考虑文化语境,且普遍高估刻板印象的存在;非英语提示反而提升文化语境考量与预测效果。额外指令微调可降低误报率,而训练数据规模对检测效果呈非单调影响。