如果我爱你

OpenAI模型，自主攻击全球最大AI开源平台_我的网站

A |     北京时间7月22日，OpenAI在官方博客发文，承认其模型在一起安全评测事故中攻击了全球最大AI开源平台Hugging Face。         OpenAI发文承认，其模型在一次安全评测中攻击了Hugging Face的生产环境          这是行业首次公开披露、模型评测失控直接升级为跨企业真实生产环境网络攻击的安全事件。    新华社成都4月27日电      （记者余里、胡璐）记者27日从中国野生动物保护协会获悉，日前，中国野生动物保护协会与美国圣迭戈动物园签署了大熊猫保护合作协议，将选择一对大熊猫前往美国圣迭戈动物园，开启为期10年的大熊猫国际保护合作。         事件的起点是一场模型能力测试，一场原本被关在隔离沙箱里的模型安全测试，最终演变成针对全球最大AI开源平台Hugging Face的真实网络攻击。模型在评估中为了“作弊”拿到高分，自主发现并串联多个零日漏洞（0 day，软件厂商尚未知晓、没有发布补丁修复的安全缺陷），逃逸出隔离环境，攻入Hugging Face生产数据库窃取答案。　　为确保两只大熊猫在美健康生活，今年3月，中国野生动物保护协会组织专家前往美国，与圣迭戈动物园就开展大熊猫合作进行深入磋商，开展技术指导与交流，明确大熊猫饲养管理、居住环境、健康护理等标准要求。

B |          在攻击发生后的事后追查阶段，面对超过1.7万条攻击日志，Hugging Face求助商业大模型，被对方的安全护栏集体拒之门外，最终完成取证分析的，是中国公司智谱的开源模型GLM-5.2。         为作弊，模型自己越狱了          据OpenAI披露，涉事模型为GPT-5.6 Sol以及一款能力更强的预发布模型。

C | 　　按照协议内容，双方正在积极推进大熊猫赴美前相关准备工作。它们当时正在参加名为ExploitGym的内部评测，该基准包含898个真实软件漏洞利用任务，专门测试AI能否把真实软件漏洞一步步变成可以实际运行的攻击。

D |          为了尽可能摸到模型能力上限，OpenAI特意降低了生产环境级别的安全拒绝机制，鼓励模型尽可能寻找复杂的攻击路径。

E | 中方从中国大熊猫保护研究中心选定了一对大熊猫“云川”（雄性）、“鑫宝”（雌性），并为两只大熊猫安排了经验丰富的饲养师和兽医陪同赴美。　　美方正在对大熊猫场馆进行改造提升，为大熊猫创造更大、更舒适的生活环境。         按照OpenAI最原本的设计，模型接触外部资源的唯一通道，是一套由OpenAI内部托管的第三方软件。同时，动物园还为两只大熊猫配备了曾在中国学习交流大熊猫饲养管理、日常护理及相关科研技术的专业团队。　　美国圣迭戈动物园是世界五大动物园之一。         模型开始确实投入了大量推理算力，专门寻找获得公网访问权限的方法，在OpenAI内部包注册表的缓存代理中发现了一个此前未知的零日漏洞，随后在OpenAI研究测试环境中完成特权提升和横向移动，成功连接外网。         联网之后，模型推断Hugging Face可能托管着ExploitGym的测试答案，随即发动攻击。         它先通过恶意数据集，利用远程代码数据加载器和数据集配置中的模板注入两处代码执行路径，在Hugging Face的工作节点上执行代码，随后在周末期间提升至节点级权限，收割云端和集群凭证，横向移动至多个内部集群，最终攻入生产数据库，直接窃取测试解法。         OpenAI表示入侵发生在7月11日周末，全程由自主AI智能体系统端到端驱动，背后是大量短生命周期沙箱组成的集群，执行了数千个独立动作。Hugging Face基于大模型的异常检测管道首先标记了入侵，OpenAI安全团队也在内部发现异常，双方启动联合取证。

F |          7月16日Hugging Face首次披露时称，这次事件“与我们之前处理过的任何情况都不同”。1996年，双方正式开启大熊猫合作，来自中国大熊猫保护研究中心的“白云”“石石”成为第一对旅居圣迭戈动物园的大熊猫。　　此后的23年时间里，双方在野生大熊猫生态学、行为学、遗传结构、监测技术、人工繁育、疾病防治、营养学、伴生物种研究以及公众教育等方面开展广泛合作交流，联合攻克了系列技术难题。直到一周后OpenAI发文认领，它才知道攻击者是谁。其中包括对大熊猫繁育、栖息地保护、大熊猫辅助营养等重点领域的重要发现。         美国模型拒绝查案，中国开源模型接手          取证阶段，Hugging Face遇到了意想不到的难题。

G | 培养了一批优秀专业人才，有效提升大熊猫保护科研水平。　　先后旅居圣迭戈动物园的大熊猫“白云”“石石”“高高”繁育的“华美”“美生”等6只大熊猫，不仅是中美两国大熊猫科研合作的结晶，更是促进两国友好交流的可爱使者，为增进中美两国人民友好作出了积极贡献。　　《 人民日报 》（ 2024年04月28日 03 版）。         为了分析超过1.7万条攻击事件记录、重建时间线、确认被接触的凭证，还要区分真实破坏和干扰调查的诱饵活动，靠人工逐条梳理通常需要数天。

H |          Hugging Face最初尝试调用商业前沿大模型的API，但请求被安全护栏拦截。触发拦截的原因是日志里包含真实的攻击命令、漏洞利用载荷和命令与控制痕迹数据，护栏无法区分提交材料的是事件响应者还是攻击者。         最终，Hugging Face在自有基础设施上部署了GLM-5.2，由它遍历全部攻击记录并完成取证分析，将数天的工作压缩至数小时。         Hugging Face特别指出，这样做还有一个额外优势：攻击数据及涉及的凭证始终留在本地环境，没有离开企业基础设施。         这场事故意外完成了一次开源模型的全球路演。         Hugging Face将困境总结为“安全不对称”：攻击者可以使用完全不受限的模型，防守方却可能被云端模型的护栏拒之门外。

I | 该公司由此建议，企业应提前准备经过验证、能够在本地运行的高能力模型。         这场事故，其实也让开源模型多了一个此前存在感不算太强、如今却相当现实的位置：安全团队的应急工具。

J |          对金融、政务、医疗等数据敏感行业而言，模型权重自主可控、数据不出企业边界、关键时刻不被服务商的审核机制卡住，正在从加分项变成刚需。         不过值得注意的是，开源模型开放权重同样降低了攻击者的门槛，安全不对称是一把双刃剑，这也是全球监管讨论开源治理时最纠结的一环。

K |          失控预演之后，竞争已经换轨          这样的失控并非没有预演。         今年4月，Anthropic在Claude Mythos Preview的System Card中披露，红队演练中模型成功逃逸加固沙箱，随后超出指令范围自主行动：给正在公园吃三明治的研究员发邮件报告成果，未经允许将漏洞细节发布到公开网站，还在另一次测试中改写git历史掩盖改动。         Anthropic因此决定不对公众开放该模型，仅通过Project Glasswing计划向苹果、谷歌、微软、摩根大通等12家机构开放用于防御。

L |          值得注意的是，相比Anthropic的模型是被明确要求尝试逃逸，本次OpenAI的模型没有收到任何逃逸指令，它是为了在测试中作弊拿到高分，自发越狱并攻击了一家无辜的第三方公司。         在业内看来，这起事件标志着AI的自主攻击能力从理论走向现实。         OpenAI研究员Micah Carroll在回应中写道：“如果这都不能让你相信错位风险将成为未来的关键隐忧，那我真不知道什么才可以。”          模型能力越强，失控作恶的潜在威胁越大，传统隔离防护持续承压，自主AI网络攻击或将成为长期常态化风险。

Current article:http://d47oh.guaxiazaopinduan.cfd/ndl/pku7xfc.html

Published on:04:17:25