当人工智能的投资热度与模型迭代节奏出现放缓,行业讨论的焦点正从能力有多强转向系统有多可靠。软件缺陷与安全漏洞,重新成为企业和技术团队必须直面的问题,安全预算的分配方式也随之改变。

IBM发布的《数据泄露成本报告》显示,AI驱动的网络攻击同比增加约56%,大约每四起恶意入侵中就有一起借助了AI技术,单起事件的平均损失高达数百万美元。这组数据让AI安全从技术议题上升为经营风险,也解释了管理层为何开始亲自过问。
攻击者正在用AI放大效率:用生成式模型批量编写钓鱼邮件,用深度伪造冒充高管发起转账指令,甚至通过污染训练数据诱导模型做出错误判断。攻击的门槛在降低,防守方的告警却在成倍增加,人力缺口因此被进一步放大。
与此同时,AI系统自身的复杂性也在制造缺陷。模型、数据管道、第三方依赖和提示词链路层层叠加,任何一环的疏忽都可能被放大为线上事故。许多团队在追求上线速度时,压缩了本该投入的安全测试,欠下的技术债最终要在生产环境偿还。

应对之道首先是前移测试。通过红队演练、对抗样本测试和上线前的安全评审,把问题暴露在开发阶段,而不是等到生产环境被攻击后才补救。安全左移不是口号,而是流程与预算的重新分配,需要研发与安全团队共同承担指标。
其次是提升透明度与可解释性。只有让开发者和监管者理解模型为何给出某个结论,才能判断错误来自数据、算法还是使用方式。对关键系统而言,可追溯的日志和版本管理同样不可或缺,它们决定了事故能否被快速定位与复盘。
第三是行业协作与人才培养。统一的安全标准、共享的威胁情报,以及既懂AI又懂安全的复合型人才,是单个企业难以独立补齐的短板。放缓期恰恰适合把这些基础工作做扎实,为下一轮扩张储备能力。

技术放缓并不等于停滞,它更像一次校准。把缺陷治理和安全能力补上,下一轮增长才有更稳固的地基;否则,能力越强,漏洞带来的代价也就越大,届时修复成本将远超今天的投入。
OpenClaw—AI研究