★ 3
新基准评测 LLM 客服智能体:GPT-5.4 领先,Qwen3.5-9B 最强开源
论文构建基于真实客服对话的技能型 LLM 工作流基准,用 MCP 兼容模拟环境生成多轮工具调用对话,对 17 个模型做零样本评测。结果显示 GPT-5.4 大幅领先,Qwen3.5-9B 是 200 亿参数以下最强开源模型;同时指出评审模型选择对结论影响显著,10 组评审两两一致率 Kappa 平…
arXiv NLP19 天前
共 3 篇相关资讯,按重要度与时间排序,每 3 小时更新。
论文构建基于真实客服对话的技能型 LLM 工作流基准,用 MCP 兼容模拟环境生成多轮工具调用对话,对 17 个模型做零样本评测。结果显示 GPT-5.4 大幅领先,Qwen3.5-9B 是 200 亿参数以下最强开源模型;同时指出评审模型选择对结论影响显著,10 组评审两两一致率 Kappa 平…
生成式AI普及后,餐厅和零售员工遇到越来越多顾客用ChatGPT的说法反驳专业建议,甚至无视过敏警告或点不存在的酒。AI幻觉加剧了顾客与服务人员之间的冲突,成为客服岗位的新困扰。
404 Media 记者 Jason Koebler 指出,因大科技平台几乎不提供人工客服,许多遇到普通技术问题的用户转而求助 ChatGPT;而 ChatGPT 越来越常告诉用户他们发现了有新闻价值的事,并点名 404 Media 可以帮忙。这反映了 AI 幻觉与媒体被误当作客服渠道的现象。