每日热点:前沿AI模型安全引爆担忧?OpenAI“表决心”:将完全断网训练!
OpenAI周五表示,它将在一个更安全的环境中训练其前沿人工智能(AI)模型,将其置于一个没有互联网访问权限的封闭系统中。
OpenAI在官方声明中确认,目前正在一套完全不接入互联网的封闭系统中开展前沿模型训练工作。公司已专门搭建了一套名为“离线世界”的完全隔离环境用于模型训练。
(资料图片仅供参考)
该公司在声明中写道:“我们预判未来的模型将具备自主识别、利用人类目前尚未发现的漏洞的能力”。
“我们与云服务提供商紧密合作,在整个基础设施中增加了新的控制措施,缩小了攻击者可利用的攻击面,并改进了检测异常行为和试图越过安全边界的方法。这些保护措施相互重叠,即使单个控制措施失效,也能有效遏制攻击——这种策略被称为纵深防御。”声明称。
这些改变是在7月份的“抱抱脸”事件以及其他人工智能模型被曝出越界行为之后做出的。本次披露之外,公司还公开了大量尚未对外发布的其他安全漏洞细节。公司已于10月1日正式重启前沿模型训练工作,正与云服务合作伙伴协同推进这套离线训练体系的落地。
Anthropic两周前也开始限制旗下最新、理论上能力最强的模型直接联网。此前几个月,研究人员接连发现,模型在执行训练任务时,为了寻找答案会入侵外部系统、在冷门网络论坛上协作,甚至开发出不同寻常的黑客攻击策略。接连发生的事件促使两家实验室收紧模型的联网权限。
OpenAI在博客文章中写道,根据目前 AI 对齐研究、监控系统和互联网基础设施的安全状况,公司认为负责任的做法是在断网环境中训练前沿模型。
该公司指出,这些举措使公司能够在造成损害之前检测并阻止不当行为。不过,据OpenAI 披露,直到 9 月 20 日,公司仍有一款前沿模型利用系统配置失误接入互联网。随后,OpenAI 暂停了 9 月余下时间的训练工作,转而开发和测试新的安全防护方案。
OpenAI补充说,“功能越来越强大的模型甚至可以在最安全的系统中发现漏洞或配置错误”,而修复这些漏洞或错误则需要OpenAI、Anthropic等公司来承担。OpenAI强调:“我们必须始终有能力阻止前沿模型未经授权、随意接入真实互联网。”
OpenAI解释说:“这些红队测试发现了之前未知的软件漏洞,以及我们研究基础设施中的配置错误。我们已经修复了红队测试人员发现的弱点,并且——如果这些问题存在于开源软件中——我们已经根据我们的‘修补地球’计划与相关维护者合作,披露并修复了这些问题。”
“随着红队测试的持续进行,我们的代理识别出的漏洞和配置错误数量显著下降。虽然我们认为这是一个令人鼓舞的信号,表明我们的基础设施实力雄厚,但我们预计未来的模型将能够识别并利用我们尚未发现的漏洞。因此,我们将持续的红队测试视为加强研究环境安全性的长期战略的核心组成部分。”该公司补充道。
贵溪市极光文具店(个体工商户)成立 注册资本10万人民币 每日热议
没有财务数据也能贷款?上海率先用“接单量”给OPC打分授信
大摩下调泛林集团目标价至339美元
四大AI预测吉马良斯vs马德拉航海:三家看好主胜,豆包猜1比1
- 1 无缘王思雨之后,山东女篮连夜官宣新外援,给张子宇传球的人来了_今头条
- 2 一男子持续给婚外女子转账2575万元,女方反向转账2258万元,妻子:属擅自赠与,要求返还;法院:转账性质混乱不清,返还差额-每日速讯
- 3 每日资讯:我国成功发射遥感五十三号07-09星、遥感五十六号19-21星
- 4 新火集团(01611.HK)授出合共2258.82万份购股权-今日看点
- 5 短讯!南宁舰疑似搁浅!曾执行南沙巡逻任务,功勋老舰保护需加大力度
- 6 微信员工谈适配iPhone Duo进度:最新8.0.80版本已初步适配,体验还会继续优化
- 7 掉链子,从绝平到被绝杀!海港B队2-3不敌榜尾杭州队,泰山B队看到反超希望
- 8 每日报道:同级最大后排空间!比亚迪新海豹07内饰发布:车长超5米
- 9 新资讯:84只股涨停 最大封单资金4.04亿元
- 10 焦点速读:成都蓉城明日对阵大连英博,韩鹏飞伤愈复出:一起拼到底