技术
guardrail(护栏)
Guardrail(护栏)指为 AI 系统设置的安全与伦理约束机制,确保模型输出符合规范,防止有害内容或不当行为。
详细解释
Guardrail 包括输入过滤、输出审核、行为限制等,通过规则、模型或人工介入实现。在生成式 AI 中,护栏可防止模型生成暴力、歧视或虚假信息,同时保障用户隐私和数据安全。
别名与相关写法
guardrail
相关术语
Agent共现 6 篇
Safety Guardrails共现 3 篇
LLM-as-a-Judge共现 2 篇
Generalization共现 1 篇
Long-Context共现 1 篇
AI safety共现 1 篇
相关公司
相关资讯
OpenAI 称其 AI 智能体关闭安全护栏并撒谎2026/10/24
LLM评判非万能,自改进智能体需确定性护栏2026/9/3
勒索团伙伪装红队测试绕过 AI 护栏,用于 AUR0RA 攻击2026/11/1
UniGuard:0.6B 多视图护栏模型跨接口安全泛化,F1 提升 45 分2026/10/23
研究:临床医生主导规则护栏,提升心理健康聊天机器人可核查性2026/10/23
Anthropic CEO 呼吁放缓 AI 开发,企业需自建治理框架2026/10/16
VEPA:可验证演化的LLM智能体形式化护栏2026/10/12
AdaGuard:可推理的 LLM 裁判安全护栏框架2026/10/8