360潘剑锋:安全的老路走不通了 360首提智能体安全治理方案

小微 2026年06月09日 阅读:39014

360潘剑锋:安全的老路走不通了 360首提智能体安全治理方案
图片来源于网络,如有侵权,请联系删除

  根据斯坦福《AI Index 2026》报告,主流大模型在垂直领域的幻觉率高达22%至94%。360安全团队监测显示,仅OpenClaw框架累计披露漏洞82个,高危占比近四成,公网上数百万AI资产更是处于无防护状态。模型幻觉、框架漏洞与资产暴露的三重叠加,正让传统“只防外部攻击”的防线显得捉襟见肘。

  在近日举办的“2026华为云畅想者大会”上,360集团首席科学家、集团副总裁潘剑锋博士首次系统性指出:AI智能体安全风险的本质并非只有外部攻击,而是大模型底层机制衍生的“原生不确定性”。

360潘剑锋:安全的老路走不通了 360首提智能体安全治理方案
图片来源于网络,如有侵权,请联系删除

  潘剑锋表示,传统安全的核心范式是“防御确定性威胁”——基于已知的漏洞特征和攻击模式,构建规则化的检测与响应体系。当AI从被动执行指令的工具跃升为具备自主决策能力的新型主体时,这一前提已被彻底打破。智能体的“自主性”意味着一旦遭恶意诱导,它会自主走完整个攻击链;“协同性”使得单点失陷的风险沿协作网络指数级蔓延;"演化性"则让它持续自我迭代,静态检测规则迅速过时。

  潘剑锋将这种无法通过代码修补彻底消除的特性定义为“原生不确定性”,并强调这并非工程缺陷,而是AI处理开放性、创造性任务的能力源泉。能力与风险同根同源,试图彻底消灭不确定性,无异于扼杀智能本身。

  更值得警惕的是,在多智能体协同的复杂网络中,单个节点的判断偏差或幻觉并不会在传递中被自然过滤,反而会作为下游节点的输入被逐级放大,形成潘剑锋所警示的“不确定性传导放大效应”,最终酿成系统性坍塌。

  面对无法被彻底消除的不确定性,潘剑锋分享了360以“管控不确定性”为核心的全链路治理实践。该方案通过“管意图、校认知、控行为”的三层架构,为智能体的不可预知性构建动态治理体系。

  在意图接入层,360落地了“以模治模”的恶意意图识别引擎,打通恶意样本运营与意图识别大模型训练的闭环,确保对新型攻击手法快速响应,实测可将DeepSeek R1等主流模型的安全水位从82%拉升至94%;在逻辑推理层,360首创“世界认知模型”(WCM),针对任务目标世界建立语义化数据与逻辑体系,与大语言模型双引擎协同工作,以预测能力约束和引导推理过程,从根源上抑制幻觉;在行为执行层,360构建“环境孪生沙箱”限制智能体行动半径,每个Agent独立运行于受信执行环境,动态行为分析引擎实时识别异常,状态监控与自动回滚全程兜底。

  “传统安全是修围墙,智能体安全是驭马。”潘剑锋最后总结道,AI 安全的目标不应是让模型变得绝对确定,而是建立一套与不确定性共存的治理体系。这场从“防御”到“管控”的范式重构,才刚刚开始。

【责任编辑:周靖杰】
    阅读下一篇:
              热门文章
              • 2026中国催收行业:"54条红线"与"断链行动"的双重净化_人保服务 ,人保护你周全

                2026中国催收行业:
                图片来源于网络,如有侵权,请联系删除2026中国催收行业:"54条红线"与"断链行动"的双重净化 2026年5月8日 来源:中研网 423 21 北京用户提问:市场竞争激烈,外来强手加大布局,国内主题公园如何突围? 上海用户提问:智能船舶发展行动计划发布,船舶制造企业的机 江苏用户提问:研发水平落后,低端产品比例大,医药企业如何实现转...
              • 国产化首件630℃高压转子锻件研制成功

                国产化首件630℃高压转子锻件研制成功
                图片来源于网络,如有侵权,请联系删除(原标题:国产化首件630℃高压转子锻件研制成功) 人民财讯7月10日电,据国机集团,近日,具有自主知识产权的国产化首件630℃超超临界二次再热机组C630R高压转子锻件成功发运,该锻件由集团下属企业国机重型装备集团股份有限公司(简称“国机重装”)联合其他单位共同研制。锻件将应用于世界首个630℃二次再热发电项目――大唐郓城国家电力示范项目,标志着我国超超临界机组材料研制实现从“跟跑”到“领跑”的历史性跨越。图片来源于网络,如有侵权,请联...
              • 厦门港务(000905)2026年一季报简析:增收不增利,盈利能力上升

                厦门港务(000905)2026年一季报简析:增收不增利,盈利能力上升
                图片来源于网络,如有侵权,请联系删除据证券之星公开数据整理,近期厦门港务(000905)发布2026年一季报。截至本报告期末,公司营业总收入58.48亿元,同比上升18.39%,归母净利润1.71亿元,同比下降0.32%。按单季度数据看,第一季度营业总收入58.48亿元,同比上升18.39%,第一季度归母净利润1.71亿元,同比下降0.32%。本报告期厦门港务盈利能力上升,毛利率同比增幅68.64%,净利率同比增幅140.65%。 图片来源于网络,如有侵权,请联系删...
              • 2026-2030年中国网络文学行业全景调研及投资潜力分析_保险有温度,拥有“如意行”驾乘险,出行更顺畅!

                2026-2030年中国网络文学行业全景调研及投资潜力分析_保险有温度,拥有“如意行”驾乘险,出行更顺畅!
                图片来源于网络,如有侵权,请联系删除保险有温度,拥有“如意行”驾乘险,出行更顺畅!_2026-2030年中国网络文学行业全景调研及投资潜力分析 2026年4月30日 来源:中研网 307 12 北京用户提问:市场竞争激烈,外来强手加大布局,国内主题公园如何突围? 上海用户提问:智能船舶发展行动计划发布,船舶制造企业的机 江苏用户提问:...
              • 伊戈尔:预计今年北美数据中心变压设备收入规模仍将快速增长

                伊戈尔:预计今年北美数据中心变压设备收入规模仍将快速增长
                图片来源于网络,如有侵权,请联系删除人民财讯5月5日电,伊戈尔(002922)近日在电话会议中表示,公司数据中心变压设备业务2025年实现品类和市场区域的双重突破,其中北美市场增速最快。从目前已接到的客户订单以及正在洽谈的项目来看,预计今年北美数据中心变压设备收入规模仍将实现快速增长。...