DEV Community

cognitalk
cognitalk

Posted on

AI 时代下的开源安全、新型攻击手段以及企业 AI 使用现状

这期来自 IBM Technology 频道的《Security Intelligence》播客视频长约 35 分钟。主持人 Matt Kazinski 与三位专家(IBM 的 Dave McInness、X-Force 的 Sophie Cunningham、Red Hat 的 Brent Holded)深入探讨了AI 时代下的开源安全、新型攻击手段以及企业 AI 使用现状

以下是视频中讨论的三个核心版块及详细内容:


1. Project Lightwell:开源安全的大手笔承诺 [01:07]

IBM 和 Red Hat 联合宣布了 Project Lightwell,这是一项高达 50 亿美元 的投资计划。

  • 项目核心: 旨在提升整个开源生态系统的安全态势。计划建立一个信誉良好的企业级安全清算中心(Clearing House),并配备由 AI 增强的 20,000 名工程师团队,用以简化漏洞报告、提炼修补程序并协调上游披露 [01:07]。
  • 为何要扩展到语言库: 红帽(Red Hat)原本在 Linux、OpenShift 等平台中对大约 15,000 个核心软件包的安全性做得很好。但如今,开发者在 Java、Python、Node.js、Go 中使用了海量的第三方“语言库”(例如当年引发大震荡的 Log4j)[02:21]。大企业内部署的这类代码库版本数量可能高达 60 万到 100 万个。Project Lightwell 的目标正是将红帽的这一套“产品化/信任化安全模型”,扩展到整个语言库生态系统中超过 150 万个包 [03:45]。
  • 为什么是现在(AI 的催化作用):
  • 现在的 AI(如黑客工具 Mythos,或者 GPT-5.5、DeepSeek 等前沿模型)在寻找和利用漏洞上变得极为聪明 [04:38, 07:30]。
  • 传统的安全扫描工具经常会漏掉一些单看风险很低的“低级漏洞”。但 AI 就像国际象棋大师一样能“看 50-60 步”,它能像串糖葫芦一样把数个低级漏洞链条式组合(Chain together),最终形成一个能获取根权限(Root)或窃取数据的致命武器 [03:08, 05:34]。

2. SIMJacking:针对 AI 编码专员的新型攻击 [12:53]

研究机构 Adversa 披露了一种名为 Simjack 的新型网络攻击手段,专门针对现在流行的“AI 自动编码专员(AI Coding Agents)”。

  • 攻击原理: 黑客潜入代码仓库或植入假仓库,并在其中放入一个带有恶意指令的文件。当 AI 编码专员读取该文件时,会被指示“将一个视频文件复制到某无害文件夹中” [13:01]。
  • 金蝉脱壳: 实际上,这个目标文件夹是一个符号链接(Symbolic Link),其真实指向是 AI 专员自身的“配置文件”;而所谓的“视频文件”其实也是一段恶意配置代码。一旦执行,AI 会直接重写自己的内核运行指令,在下一次启动时开始执行黑客的代码 [13:13]。
  • “人机协同(Human in the loop)”失效: 虽然流程中有代码审计员(人类)把关,但由于路径和文件名被伪装了,人类审阅时看到提示“是否允许复制这个视频文件?”,往往会因为觉得无害而直接点击“允许”,从而短路了安全机制 [13:31]。
  • 专家反思:
  • Dave 认为: 这和以往的钓鱼攻击(Fishing Attack)本质上是一样的。虽然 AI 让它看起来像魔法,但利用的还是人类这一“最脆弱的环节” [14:10]。目前的 AI 发展处于钟摆的过渡期,之前觉得 AI 包办一切,现在又过分依赖人类面面俱到,未来会回归理性均值 [15:00]。
  • Sophie 认为: 目前不建议盲目让“智能体(Agentic AI)”全权掌管系统或去读个人邮件(毕竟之前发生过 AI 误删生产环境数据库的事故),但通过不断 leveling up,人和 AI 的协同会越来越好 [18:19]。
  • Brent 提到护栏(Guardrails): 企业需要给 AI 戴上“输入和输出护栏”。红帽此前收购了 Chatterbox 技术就是为了做这件事。比如 Amazon 之前因为 AI 直接推送代码导致整个可用区(Availability Zone)瘫痪,随后就立刻修改了政策——绝对不允许 AI 直接 Commit,必须有人类兜底审查 [20:01, 21:23]。

3. 2026 企业 AI 使用现状报告 [26:05]

Layer X Security 发布了《2026年 AI 使用现状报告》,揭示了企业在实际应用 AI 时的安全断层。

  • 报告核心发现: AI 的使用和随之带来的安全风险,并非平均分布在企业内部,而是高度集中在极少数的 “超级用户(Super Users / Power Users)” 身上;同时,AI 正在从简单的网页聊天框(Chatbot)碎片化扩散到浏览器扩展、各种应用连接器(Connectors)中 [26:27]。
  • 专家的不同意见(Sophie & Brent):
  • 报告建议企业应该把安全防护的重心放在这些“超级用户”身上,但 Sophie 和 Brent 表达了不同看法。他们认为,超级用户往往懂技术,反而不容易踩坑 [27:20, 29:16](就像熟悉命令行的人不容易被黑客的一串恶意命令骗到一样)。
  • 相反,那些偶尔用一下 AI、或者在网页版 Gemini 里强制给 AI 喂数据试图加速日常工作的“轻度/新手用户”更加危险,他们可能会因为写了糟糕的 prompt 或给了过高的权限,导致数据泄露或被误删 [29:22, 31:08, 33:02]。

  • 技术范式的转变: 真正高级的 AI 用户,其工作方式已经从“让 AI 帮我写完这段代码(Code completion)”,变成了“我不再写代码,我的工作是管理那个正在写代码的 AI 系统” [29:50]。


💡 总结与幽默金句

在视频的尾声,Sophie 贡献了本期节目的核心金句(也被主持人 Matt 调侃为可以当做节目新口号):

"We have to be worried about everything all the time."(我们必须在所有时间对所有事情保持警惕。) [17:35, 34:28]

视频最后还推荐了该节目的最新音频音频 Bonus:由 IBM 数据安全副总裁 Vishal Kamat 带来的关于“多模态 AI 环境下的安全问题”的专访,可在 Spotify 等平台收听 [34:48]。

Top comments (0)