技术

Red Teaming(红队测试)

红队测试是一种通过模拟对抗性攻击来评估AI系统安全性的方法,旨在发现模型漏洞和偏见。它帮助开发者提前修复问题,提升系统鲁棒性。典型应用包括对LLM进行越狱攻击测试和内容安全评估。

收录于 2026/9/10相关资讯 2 篇近 30 天 1 篇在词典中查看 →

详细解释

红队测试源于军事演习,现被引入AI安全领域。通过人工或自动生成对抗样本,测试模型在恶意输入下的表现,如诱导有害输出、泄露隐私等。常用方法包括提示注入、对抗性扰动。代表工作有OpenAI的红队网络、Anthropic的对抗测试。

别名与相关写法
red teaming

相关术语

Agent共现 2 篇
agentic AI共现 1 篇

相关资讯

完整术语表见 AI 术语词典; 每日新术语与进展见 AI 早报。