#AI代理安全

共 2 篇相关资讯,按重要度与时间排序,每 3 小时更新。

★ 4

开源提示注入检测器能否识别真实AI代理攻击

作者用10个开源检测器测试629个真实AgentDojo注入攻击,攻击均嵌入普通工具输出中。结果显示没有检测器能在不误拦正常流量的情况下捕获多数攻击,最佳权衡为51%捕获率、2%误报率,Meta的Prompt Guard 2仅捕获1%。结论是防御需基于指令来源与工具调用行为,而非仅靠文本分类。

Hacker News – AI39 天前
★ 3

Humanbound:AI代理开源红队测试

Humanbound 发布面向 AI 代理的开源对抗测试引擎、SDK 与 CLI,可对真实端点进行多轮对话、工具滥用等攻击测试,并将失败案例转化为可部署的防火墙规则。提供免费托管层,支持本地运行与 Ollama 离线模式。

Hacker News – AI32 天前

这个主题的相关资产

相关公司Meta1

相关标签

AI代理安全 最新资讯与动态(2 篇) - 智讯 AI News