当AI学会“攻击”AI,上海AI实验室亮出“防御神器”
创始人
2026-07-25 12:41:38
0

近日,全球最大的AI开源社区Hugging Face在官网披露了一起安全事故,攻击者是一个完全自主的AI智能体系统。这一事件在全球引发关于AI安全、取证与防护的广泛讨论。新民晚报记者从上海人工智能实验室获悉,其最近推出“书安”AI安全基座平台,涵盖“数字孪生平台、智能验证矩阵、数据进化飞轮”三大核心模块,旨在构建可复现、可评估、可进化的全链路AI安全验证体系。

来源:东方IC

高保真孪生平台是整套AI安全验证体系的起点。依托数字孪生、数据脱敏和安全隔离等技术,“书安”AI安全基座平台将真实系统中的业务流程、资产关系、权限结构和运行环境进行高精度映射,形成动态的验证体系。该孪生体不仅复刻静态配置,更实时模拟业务状态变化与异常响应,确保每一次验证都能反映真实生产环境下的潜在风险与安全盲区。

据介绍,书安平台颠覆传统安全“靶场”模式,可承载数千级别安全验证智能体同场博弈、迭代进化。书安建成含1500余个业务场景、50万余真实工具的动态仿真环境,可支撑复杂工具联动调用、多轮长程交互等全真业务流程仿真验证;依托自研超图马尔科夫链验证算法,现已完成17套线上真实业务系统的全维度安全测评与有效性核验。

在AI安全验证过程中,“书安”AI安全基座平台首先扮演“体检中心”的角色。它内置了一套由上海AI实验室自主研发的智能扫描引擎,不依赖固定的漏洞库,通过自适应推理来理解系统的业务逻辑,用数字孪生高并发仿真模拟各种极端场景,同时驱动多智能体协同分别检查不同的模块。更关键的是,书安平台引入了类似AlphaZero的自博弈强化学习能力,让智能体具备自主演化能力。

随后,书安平台将转入“体测中心”模式,对系统进行全方位的风险应对测试。它构建了一套多维度动态评估体系,结合数据库访问行为、全链路业务上下文及系统运行状态,可自动识别异常,并动态调整和执行测试方案,形成自动化闭环“体测”流程。

整套验证过程,书安平台始终运行着一套智能裁判系统,实时记录验证全过程及最终效果,安全风险影响等数据,自动化研判打分并对结果公正裁决,最终输出标准化、可量化、可追溯的安全评估报告。

来源:东方IC

新民晚报记者获悉,目前,“书安”AI安全基座平台已在多个产业关键场景开展应用验证——在国际物流供应链领域,平台通过模拟新型安全隐患,助力厦门国际物流供应链中试基地验证核心业务系统应对复杂风险的能力,提升供应链在智能化场景中的安全韧性;在金融领域,平台支撑银联金融支付中试基地的金融支付垂域大模型PaySage1.0-Turbo、商户入网审核智能体、数据分类分级智能体、用户合作经营智能体等多类业务场景开展安全验证,保障模型与智能体应用安全可靠运行;在进出境领域,平台帮助上海海关将安全多智能体协同能力嵌入单证审核、风险防控、口岸查验等关键环节,实现监管更加精准严密、通关更加便利高效,同时确保系统安全可控,保障业务稳定运行。

自2024年提出“AI—45°平衡律”以来,上海AI实验室致力于推动AI安全与性能同步演进,当前已逐步建成覆盖顶层理念、核心技术与行业标准的完整支撑体系。

相关内容

一个模型控制机器人从头到脚...
7 月 30 日,谷歌 DeepMind 发布新一代机器人基础模型...
2026-08-02 11:33:00
企业为什么需要微信CRM?...
微信CRM的核心优势是什么?微信CRM的核心优势在于依托微信的海量...
2026-08-02 11:30:18
2026数博会 | 探索词...
7月28日,国家数据局副局长余英在2026中国国际大数据产业博览会...
2026-08-02 11:27:22
狂奔4天半的神秘AI,奥特...
新智元报道 7月29日,华盛顿国会山。 奥特曼刚结束一场与参议员...
2026-08-02 11:23:51
CE、FCC双认证!广和通...
广和通要闻 近日,广和通全球版低功耗LTE模组MQ771-GL通过...
2026-08-02 11:19:49
一颗芯片、五大联赛、七项超...
7月30日,2026骁龙游戏技术赏在上海启幕,全方位展现了骁龙在移...
2026-08-02 11:17:23
原创 ...
不知道从什么时候开始,出门不带充电宝,心里就慌得一批。刷半小时抖音...
2026-08-02 11:14:20
大湾区成为全球创新中心不可...
由南方科技大学牵头搭建的粤港澳大湾区量子科学中心,正统筹深港穗三地...
2026-08-02 11:12:52
原创 ...
在美国德州一片不起眼的试验场里,有一台机器没有钻头,却在往地下钻。...
2026-08-02 11:11:23

热门资讯

一个模型控制机器人从头到脚所有... 7 月 30 日,谷歌 DeepMind 发布新一代机器人基础模型系列 Gemini Robotic...
企业为什么需要微信CRM?核心... 微信CRM的核心优势是什么?微信CRM的核心优势在于依托微信的海量用户基础,实现高效即时沟通、精准客...
2026数博会 | 探索词元交... 7月28日,国家数据局副局长余英在2026中国国际大数据产业博览会新闻发布会上表示,鼓励基于词元应用...
狂奔4天半的神秘AI,奥特曼宣... 新智元报道 7月29日,华盛顿国会山。 奥特曼刚结束一场与参议员的闭门会,一出门就被记者围住。 有...
CE、FCC双认证!广和通Ca... 广和通要闻 近日,广和通全球版低功耗LTE模组MQ771-GL通过CE、FCC认证。CE和FCC分别...
一颗芯片、五大联赛、七项超标:... 7月30日,2026骁龙游戏技术赏在上海启幕,全方位展现了骁龙在移动游戏技术创新、生态协同合作以及对...
原创 长... 不知道从什么时候开始,出门不带充电宝,心里就慌得一批。刷半小时抖音掉电10%,导航20分钟电量见红,...
大湾区成为全球创新中心不可阻挡 由南方科技大学牵头搭建的粤港澳大湾区量子科学中心,正统筹深港穗三地科研资源,创新教育科技人才一体化机...
原创 地... 在美国德州一片不起眼的试验场里,有一台机器没有钻头,却在往地下钻。它靠的是一束高能量的毫米波,把坚硬...
周末,存储芯片利好来了 【导读】芯片的利好消息 中国基金报记者 泰勒 大家好啊,一起来关注一下芯片的利好消息吧。韩国7月出口...