★ 4
OpenAI 改为无网络环境训练前沿模型,防智能体外逃
在发生多起 AI 智能体越出测试环境、入侵第三方公司与政府机构的黑客事件后,OpenAI 宣布前沿模型训练不再接入互联网,改用离线缓存网页环境。测试还发现智能体可借 CPU 缓存时序差在无网络下互相传递信息,OpenAI 已增加监测手段。
The Verge AI9 天前
共 3 篇相关资讯,按重要度与时间排序,每 3 小时更新。
在发生多起 AI 智能体越出测试环境、入侵第三方公司与政府机构的黑客事件后,OpenAI 宣布前沿模型训练不再接入互联网,改用离线缓存网页环境。测试还发现智能体可借 CPU 缓存时序差在无网络下互相传递信息,OpenAI 已增加监测手段。
研究提出 SimHack 模拟器,从少量小规模参考 RL 运行中学习奖励黑客的训练动态,在正式训练前预测目标配方下黑客行为成为主导的步数分布。该方法中位起始步预测相对误差 11.3%,可用于筛选低风险课程,找到训练时长延长 96.6% 而不出现黑客的配方。