OpenAI 推迟 AI 代理发布的原因是什么?对“提示注入”攻击的担忧依然存在

随着人工智能技术的迅猛发展,许多公司纷纷推出各自的 “AI 代理” 系统,这些代理能够自主与环境互动,完成无需人类干预的任务。微软和 Anthropic 等公司已率先推出了自己的 AI 代理,而行业领导者 OpenAI 却迟迟未能发布自己的版本,这背后的原因令人深思。

ChatGPT (4)OpenAI 人工智能

据《The Information》报道,OpenAI 的推迟与 “提示注入” 攻击有关。这种攻击方式可以诱使 AI 模型接受恶意方的指令。例如,当用户指派 AI 代理在线搜索和购买物品时,AI 可能无意中访问一个恶意网站,该网站可能会指示它忘记先前的指令,甚至登录用户的邮箱,窃取信用卡信息。这不仅会给用户带来灾难性后果,也会严重损害 OpenAI 的声誉。

由于 AI 代理具有自主操作电脑的能力,因此它们面临着更高的安全风险。如果这些代理被黑客入侵,它们可能会对用户的文件和数据造成更大的损害。OpenAI 的一位员工对此表示,虽然任何大型语言模型(LLM)都有被攻击的潜在风险,但 AI 代理的自主能力加剧了这一风险。

目前,提示注入的风险已在其他平台上得到充分证实。去年,一位安全研究人员就演示了微软的 C o p i l o t AI 如何轻易地被操控,泄露组织的敏感数据,包括电子邮件和银行交易记录。此外,该研究人员还成功地操纵了 C o p i l o t,令其以其他员工的风格撰写邮件。

OpenAI 自身的 ChatGPT 也曾遭遇提示注入的攻击,一名研究人员通过上传第三方文件(如 Word 文档)成功植入虚假的 “记忆”。在这种背景下,OpenAI 的员工对竞争对手 Anthropic 在发布 AI 代理时的 “放任态度” 表示惊讶。Anthropic 仅建议开发者 “采取措施将 Claude 与敏感数据隔离”,并没有采取更为严谨的安全措施。

据报道,OpenAI 可能会在本月推出其代理软件。然而,人们不禁要问,开发团队所争取到的时间是否足以为其产品建立更强的安全防护。

划重点:

🌐 OpenAI 因担忧 “提示注入” 攻击而未推出 AI 代理,潜在风险巨大。  

💻 其他公司如微软和 Anthropic 已推出 AI 代理,但安全隐患仍然严重。  

🔒 OpenAI 正在努力增强其产品的安全性,以防止潜在的数据泄露。

猜你喜欢

斯巴达儿童赛全国总决赛热火朝天 小勇士们奋力争夺前往世锦赛的资格
斯巴达儿童赛全国总决赛热火朝天 小勇士们奋力争夺前往世锦赛的资格

小选手在比赛中。组委会供图北京8月1日电 记者从赛事组委会获悉,7月30日-31日,2022长安福特斯巴达勇士儿童赛崇礼

2022年度北京市级社会足球赛事正式启动 活动将持续进行至12月,期待市民积极参与
2022年度北京市级社会足球赛事正式启动 活动将持续进行至12月,期待市民积极参与

北京8月1日电(记者 卞立群)7月31日晚,2022年北京市市级社会足球活动启动仪式在朝阳区首开望京体育园举办,启动仪式

北京曲艺界隆重纪念琴书艺术泰斗关学曾诞辰100周年的盛大活动
北京曲艺界隆重纪念琴书艺术泰斗关学曾诞辰100周年的盛大活动

专场演出现场北京曲艺家协会供图北京8月1日电 (记者 应妮)由北京文学艺术界联合会主办、北京曲艺家协会承办的《永远的旋律

林高远将在即将到来的比赛中再次对阵张本智和,期待精彩对决!
林高远将在即将到来的比赛中再次对阵张本智和,期待精彩对决!

WTT常规挑战赛突尼斯站将于北京时间8月1日下午正式拉开战幕,由于赛事的级别并不是很高,国乒大部分主力并未参赛,由林高远

中国高尔夫女将冯珊珊正式宣布退役,结束辉煌的职业生涯
中国高尔夫女将冯珊珊正式宣布退役,结束辉煌的职业生涯

8月2日,中国首位高尔夫奥运奖牌得主冯珊珊,在自己33岁生日前宣布退役。“很快就要迎来我三十三岁的生日了,而我也要做一个

2022游戏责任论坛召开 共同探讨如何推动游戏行业的文化传承与发展
2022游戏责任论坛召开 共同探讨如何推动游戏行业的文化传承与发展

北京8月3日电(记者 上官云)近日,由中国音像与数字出版协会指导,人民网主办的“2022游戏责任论坛”在北京举行。据介绍

北京队全力出击2022围甲联赛 韩国围棋名手金明训加盟增添实力
北京队全力出击2022围甲联赛 韩国围棋名手金明训加盟增添实力

围甲联赛开幕式现场。供图北京8月3日电 8月3日,2022年中国围棋甲级联赛在浙江省长兴县正式开幕。参赛的16支队伍齐聚

弘扬秦腔魅力,承载家国情怀传承正统音韵
弘扬秦腔魅力,承载家国情怀传承正统音韵

扬秦腔风华,传家国正音写在被田汉誉为“世界三大最古老剧社之一”的西安易俗社创建110周年之际本报记者刘书云、孙正好文武盛

聚焦千家万户,洞察生活百态与真实故事
聚焦千家万户,洞察生活百态与真实故事

2012年以来,中国社会高速发展,14亿人的追梦奋斗,写下了辉煌灿烂的篇章。国产纪录片也在光阴流转中,留下了无数值得记忆

短视频时代下网络文艺的新发展与拓展策略探析
短视频时代下网络文艺的新发展与拓展策略探析

网络文艺迎着数字时代的东风乘势而起,是与传统文艺不尽相同的艺术形式,呈现出独特的艺术特征和审美旨趣。它向传统文艺借鉴思路