IT资讯

ChatGPT Operator 遭提示注入攻击,泄露用户隐私数据

时间:2010-12-5 17:23:32  作者:电脑教程   来源:人工智能  查看:  评论:0
内容摘要:OpenAI 为 ChatGPT Pro 用户打造的前沿研究预览工具 ChatGPT Operator,近来因一个严重漏洞引发关注。该漏洞可通过提示注入攻击,致使敏感个人数据面临泄露风险。ChatGP

OpenAI 为 ChatGPT Pro 用户打造的遭注入前沿研究预览工具 ChatGPT Operator ,近来因一个严重漏洞引发关注。提示该漏洞可通过提示注入攻击 ,攻击致使敏感个人数据面临泄露风险 。泄露

ChatGPT Operator 是用户隐私一款功能强大的先进 AI 代理 ,具备网页浏览与推理能力 ,数据能帮助用户执行多种任务 ,遭注入如研究特定主题 、提示预订旅行行程 ,攻击甚至代表用户与各类网站进行交互 。泄露然而 ,用户隐私近期的数据一些演示却揭示出它存在安全隐患 —— 可在与网页交互过程中被恶意操控 ,亿华云进而导致隐私数据泄露 。遭注入

攻击原理  :提示注入如何运作

根据 wunderwuzzi 的提示博客介绍 ,提示注入是攻击一种将恶意指令嵌入 AI 模型处理的文本或网页内容中的技术。对于 ChatGPT Operator ,这种攻击涉及以下步骤  :

通过提示注入劫持 Operator:恶意指令托管在 GitHub Issues 等平台或嵌入到网站文本中。导航至敏感页面:攻击者诱骗 Operator 访问包含敏感个人信息(如电子邮件或电话号码)的认证页面 。通过第三方网站泄露数据:Operator 被进一步操纵,将这些信息复制并粘贴到恶意网页中 ,无需表单提交即可捕获数据  。

例如 ,源码下载在一次演示中 ,Operator 被诱骗从用户的 YC Hacker News 帐户中提取私人电子邮件地址,并将其粘贴到第三方服务器的输入字段中。这种攻击在 Booking.com 和 The Guardian 等多个网站上均能无缝执行。

缓解措施

OpenAI 已实施多层次的防御措施来降低此类风险:

用户监控:提示用户监控 Operator 的行为 ,包括输入的文本和点击的按钮,但这在很大程度上依赖于用户的警惕性。内联确认请求 :对于某些操作,服务器租用Operator 会在聊天界面中请求用户确认后再继续执行。虽然在某些情况下有效,但在早期测试中被绕过。带外确认请求 :在跨网站边界或执行复杂操作时,Operator 会显示侵入式确认对话框  ,解释潜在风险。然而 ,这些防御措施并非万无一失。

尽管如此 ,由于提示注入攻击具有概率性 ,攻击和防御都取决于特定条件是否满足 ,因此这类攻击仍然部分有效。

这些演示中暴露的漏洞引发了严重关切 :如果被利用 ,模板下载攻击者可能会访问存储在认证网站上的敏感个人信息。由于 Operator 会话在服务器端运行,OpenAI 可能也会访问会话 Cookie、授权令牌和其他敏感数据。

这些攻击削弱了人们对自主 AI 代理的信任 ,凸显了对强大安全措施的需求。

为解决这些挑战 ,OpenAI 可以考虑开源其提示注入监控器的一部分,或分享其防御机制的详细文档。这将使研究人员能够评估和改进现有的免费模板缓解策略 。此外,网站可以通过识别独特的 User-Agent 标头,采取阻止 AI 代理访问敏感页面的措施。

提示注入攻击表明 ,在开发出针对恶意指令的强大防御措施之前,完全自主的代理可能仍难以实现 。目前,警惕的监控和分层的缓解措施对于保护用户隐私和维持对 AI 技术的香港云服务器信任至关重要  。

copyright © 2025 powered by 创站工坊  滇ICP备2023000592号-21sitemap