★ 3
OpenAI 披露前沿模型失准检测的分层监控方法
OpenAI 发文介绍其如何通过分层监控机制检测前沿模型失准与智能体越权行为,以便响应人员在事件升级前介入。该文属于 OpenAI 安全实践的方法论说明。
OpenAI3 天前
共 3 篇相关资讯,按重要度与时间排序,每 3 小时更新。
OpenAI 发文介绍其如何通过分层监控机制检测前沿模型失准与智能体越权行为,以便响应人员在事件升级前介入。该文属于 OpenAI 安全实践的方法论说明。
Redwood Research 发布博客,介绍一种「模拟控制评估」方法:用一个会伪造工具调用输出的 LLM 对 AI 智能体监控系统进行红队测试,以检验监控机制能否识别欺骗行为。该工作属于 AI 控制与安全评估方向,对智能体部署的可信性有参考价值。
AgentSight 是一个利用 eBPF 技术对 AI 智能体进行系统级性能分析与监控的开源工具,托管于 GitHub。它能在内核层面追踪智能体的系统调用与资源使用,帮助开发者诊断智能体运行时的性能瓶颈。该工具面向需要深度可观测性的 AI 应用开发场景。