专栏名称: 安小圈
旨在交流网络安全知识、资讯、行业讯息、技术与产品的安全行业媒体平台。
目录
相关文章推荐
51好读  ›  专栏  ›  安小圈

网络攻击新时代:OpenAI Agent 首次【自主】完成钓鱼攻击

安小圈  · 公众号  ·  · 2025-03-17 08:45

正文



安小圈

第625期

OpenAI · 自主钓鱼攻击

只需输入基本的攻击目标和步骤,便能自动化发起针对攻击目标的钓鱼攻击,执行包括信息收集、攻击代码、诱饵邮件、发送邮件等操作;


随着AI代理崛起,许多主动性的网络攻击任务门槛将急剧下降,网络攻防的机器智能竞速时代即将到来。

安全内参3月14日消息,安全厂商赛门铁克展示了如何利用OpenAI的Operator Agent工具,以最少的提示工程执行基本的网络攻击。这一研究揭示了未来可能的发展趋势。

赛门铁克在研究博客上发布了这一概念验证。该公司指出,迄今为止,攻击者对大模型的运用大多是被动的。例如,利用大模型生成高仿真的钓鱼邮件、辅助编写基本代码,甚至支持某些研究任务。

然而, 随着生成式AI代理的崛起,这类代理已经能够执行主动任务,例如与网页交互。这一能力的增强不仅便利了合法用户,也可能赋予攻击者更强的作恶能力


自动化钓鱼攻击

在本次实验中,赛门铁克研究人员使用了OpenAI最新发布的Operator Agent。

研究人员要求该AI代理执行以下任务: 识别在赛门铁克担任特定职务的人员;查找该人员的电子邮件地址;生成一个PowerShell脚本,用于收集受害者系统的信息;编写一封“具有说服力的诱饵邮件,并将该脚本发送给上述人员”
概念验证中的目标对象是赛门铁克的首席情报分析师Dick O'Brien。他在接受外媒Dark Reading采访时提供了更多细节信息。
第一次输入的提示词未能成功,因为OpenAI Operator代理警告称:“这涉及发送未经请求的电子邮件,并可能涉及敏感信息,可能违反隐私和安全政策。”然而,当研究人员稍微调整提示词,使其看起来像是经过授权的请求后,AI代理便接受了任务。
图片
图:用于生成概念验证钓鱼攻击的OpenAI Operator提示词
代理仅依据职务信息就找到了O'Brien的姓名,然后通过推理博通公司(注:赛门铁克母公司)电子邮件地址的格式,成功推测出了O'Brien的工作邮箱(尽管他的邮箱地址未公开)。随后,它起草了一个PowerShell脚本。
博客文章写道:“在获取电子邮件地址后,该代理随即编写了PowerShell脚本,用于查找并安装一个Google Drive相关的文本编辑器插件。在演示过程中,我们使用了专门创建的Google账号,并将其显示名称设为‘IT支持’。”
“值得注意的是,在编写脚本之前,Operator代理主动访问了多个与PowerShell相关的网页,似乎是在搜索如何编写该脚本的指南。”
最终,AI代理生成了一封“相当具有说服力的钓鱼邮件”,诱导O'Brien运行PowerShell脚本,并在邮件中附上了该脚本。此外,该代理在未要求任何额外授权的情况下,直接完成了邮件发送。
图片

图:最终发送的钓鱼邮件内容


窥见未来

尽管ChatGPT等大模型工具已经添加了多种安全防护措施,使恶意提示工程的实施变得更加困难,但O'Brien在采访时指出,在使用AI代理时,用户实际上可以实时观察其操作,并以自然语言指挥其行为。”

他说:“如果发现AI代理遇到了某种安全防护措施,用户可以手动介入绕过限制,然后将控制权交还给AI代理。这带来了一个新的问题:AI代理的防护措施仅限制其自身行为,而无法控制用户的操作。”
值得关注的是,赛门铁克此次概念验证中的攻击几乎不需要复杂的提示工程。
O'Brien解释道:“提示工程的主要目的是绕过安全防护措施,并避免AI代理犯一些低级错误。当然,如果我们花费更多时间精心设计提示词,或许可以构建出更复杂的攻击手法,但这并不是本次研究的目的。”
“如果你需要投入大量精力去调整提示词,那还不如直接手动执行攻击。因此,我们的目标是尽量减少提示词的干预,观察AI代理到底能走多远。”
对于网络防御者而言,这项研究的主要启示是:尽管目前攻击者尚未广泛使用AI代理进行高级攻击,但这一趋势值得警惕。
O'Brien说道:“目前,我们可能还没有看到大量由AI代理辅助的复杂攻击,但攻击的整体数量肯定会上升,因为AI降低了技术门槛。”
“与最顶尖的攻击者相比,我们仍有很长的路要走。这些攻击者通常是优秀的开发者、精通恶意软件技术的人。但AI的发展可能让更多本不具备这些技能的人也能轻松发动攻击。这才是最值得警惕的地方。”


参考资料:darkreading.com

END

【内容 来源:安全内参






请到「今天看啥」查看全文