【ArchSummit】如何通过AIOps推动可量化的业务价值增长和效率提升?>>> 了解详情
写点什么

蚂蚁集团发布 AI 安全检测平台“蚁鉴 2.0 ”,可实现用生成式能力检测生成式模型

  • 2023-07-07
    北京
  • 本文字数:1604 字

    阅读完需:约 5 分钟

蚂蚁集团发布 AI 安全检测平台“蚁鉴 2.0 ”,可实现用生成式能力检测生成式模型

7 月 7 日,2023 世界人工智能大会( WAIC )“聚焦·大模型时代 AIGC 新浪潮—可信 AI ”论坛举行,蚂蚁集团联合清华大学发布 AI 安全检测平台“蚁鉴 2.0 ”。蚁鉴 2.0 可实现用生成式 AI 能力检测生成式 AI 模型,可识别数据安全、内容安全、科技伦理三大类的数百种风险,覆盖表格、文本、图像等多种数据和任务类型,是业内首个实现产业级应用的全数据类型 AI 安全检测平台。据了解,该产品还入选了本届大会的“镇馆之宝”。


蚂蚁集团联合清华大学共同发布 AI 安全检测平台“蚁鉴 2.0 ”


AIGC 安全成为当前人工智能研究发展的重要议题。中国科学院院士何积丰发表《可信人工智能展望》主题演讲。他认为,“不能再将人工智能视为简单的技术工作,而是成为整个组织的变革引擎。可信人工智能要致力于保障数据安全可信、系统行为可追责、算法模型可解释、网络环境可信、法律伦理可信等问题。”

 

在该论坛上,蚂蚁集团同时宣布,“蚁鉴 2.0 ”全面开放,面向全球开发者免费提供 AIGC 安全性、AI 可解释性、AI 鲁棒性三项检测工具,可服务于数字金融、教育、文化、医疗、电商等领域的大规模复杂业务场景。

 

据了解,“蚁鉴 2.0 ”的两项硬核能力,一是实现了用生成式能力检测生成式模型。检测标准覆盖内容安全、数据安全、伦理安全三大类,可对大模型生成式内容完成包含个人隐私、意识形态、违法犯罪、偏见与歧视等数百个维度的风险对抗检测,并会生成检测报告,帮助大模型更加有针对性地持续优化。


蚂蚁集团大安全事业群技术部总裁李俊奎表示,“生成式大模型是一种‘深黑盒’技术,‘蚁鉴 2.0 ’通过智能博弈对抗技术,模拟黑产以及自动化生成海量测试集,可实现「生成式机器人」对「AIGC 生成式模型」的诱导式检测计算,很像一个 24 小时不眠不休的‘安全黑客’在找茬大模型,从而找到大模型存在的弱点和安全问题所在。这种 AI 对 AI 的评测,也是教学相长。好比生成式考官考核生成式运动员,在对抗中双方能力互相提升,进一步提高整个行业的 AI 安全水位。”

 

另一项硬核能力是,“蚁鉴 2.0 ”融入了可解释性检测工具。综合 AI 技术和专家先验知识,通过可视化、逻辑推理、因果推断等技术,从完整性、准确性、稳定性等 7 个维度及 20 余项评估指标,对 AI 系统的解释质量量化分析,帮助用户更清晰验证与优化可解释方案。

 

据了解,“蚁鉴 2.0 ”集成了蚂蚁近 10 年可信 AI 实践、1000 余项可信 AI 专利,支持零编码测评。开发者通过 API 接口,将 AI 模型接入蚁鉴,就可以一键识别和挖掘模型漏洞。

 

蚂蚁集团认为,人工智能的深度应用,不仅对数据、算法、算力提出了更高要求,也对安全、隐私、伦理提出更多挑战。在确保数据安全和隐私保护、健全人工智能伦理与安全的前提下,才能让 AI 技术真正地释放应用价值。

 

此次论坛上,中国信通院、上海人工智能实验室、武汉大学、蚂蚁集团等多家单位共同发起的《 AIGC 可信倡议》。该倡议得到数十家单位参与,围绕人工智能可能引发的经济、安全、隐私和数据治理等问题,提出构建 AIGC 可信发展的全球治理合作框架,采用安全可信的数据资源、技术框架、计算方法和软件平台等全面提升 AIGC 可信工程化能力,最大限度确保生成式 AI 安全、透明、可释。


在 2023 WAIC 可信 AI 论坛上,“产学研用”界共同发起 AIGC 可信倡议


论坛现场还发布了由中国信通院、清华大学、蚂蚁集团联合编纂的《可信 AI 技术和应用进展白皮书( 2023 )》。该报告基于统一的可信 AI 认知维度,梳理总结可信 AI 发展现状,提练了面向新阶段大模型和 AIGC 引发的新需求,形成以技术为保障的可信 AI 评估体系和工具,探索新一代可信人工智能发展。

 

公开资料显示,蚂蚁从 2015 年开启可信 AI 的实践和探索,是蚂蚁集团在人工智能领域的重点布局之一。通过可信 AI 技术的突破,蚂蚁集团建设了一套世界领先的智能风控解决方案;蚁鉴 AI 安全检测平台先后获得 2022 年上海金融科技中心建设三周年优秀成果、信通院可信人工智能实践标杆案例等认可。


公众号推荐:

跳进 AI 的奇妙世界,一起探索未来工作的新风貌!想要深入了解 AI 如何成为产业创新的新引擎?好奇哪些城市正成为 AI 人才的新磁场?《中国生成式 AI 开发者洞察 2024》由 InfoQ 研究中心精心打造,为你深度解锁生成式 AI 领域的最新开发者动态。无论你是资深研发者,还是对生成式 AI 充满好奇的新手,这份报告都是你不可错过的知识宝典。欢迎大家扫码关注「AI前线」公众号,回复「开发者洞察」领取。

2023-07-07 16:395472
用户头像
鲁冬雪 InfoQ 策划主编

发布了 338 篇内容, 共 198.3 次阅读, 收获喜欢 271 次。

关注

评论

发布
暂无评论
发现更多内容

ICO 的未来:塑造软件开发的趋势

区块链软件开发推广运营

数字藏品开发 dapp开发 区块链开发 链游开发 NFT开发

2023 第十二届中国智能产业高峰论坛 - 文档大模型的未来展望

海拥(haiyong.site)

图像处理

4类缺陷管理工具比较

PingCode

团队协作 缺陷管理 bug管理

GLTF编辑器告诉你凹凸贴图的作用

3D建模设计

纹理处理 材质贴图

GLTF编辑器 解析什么是模型粗糙度

3D建模设计

纹理处理 材质贴图

备受以太坊基金会青睐的 Hexlink,构建亿级用户涌入 Web3的入口

威廉META

C++ 的cout格式化输出

智趣匠

个性化精准推送服务:Mobpush引领用户深度参与度的新纪元

MobTech袤博科技

大数据 智能推送

研发人员生产力到底能不能量化?这几种方法告诉你答案!

PingCode

绩效管理 研发生产力

蓝易云:Nginx搭建文件下载服务器教程!

百度搜索:蓝易云

nginx Linux 云计算, 云服务器, #运维

原型设计工具Axure RP 9 mac完美激活版 Axure RP下载地址

mac

Axure RP 9 苹果mac Windows软件 原型设计软件

NSDT 3D孪生场景搭建:阵列摆放详解

3D建模设计

数字孪生 3D场布

GLTF编辑器教你区分自发光贴图和光照贴图

3D建模设计

纹理处理 材质贴图

Premiere Pro 2022 for Mac(pr2022)更新字幕转换包 v22.6.2激活版

mac

PR Premiere Pro 2022 苹果mac Windows软件 视频剪辑软件

拦截|篡改|伪造.NET类库中不限于public的类和方法

沙漠尽头的狼

永久激活版Premiere Pro 2023中文版 pr mac破解版 支持M2

晴雯哥

ARTS打卡第6周

苏籍

Golang不可不知的7个并发概念

俞凡

golang

NFT艺术品交易所系统开发 [定制部署,1周上线]

V\TG【ch3nguang】

16个值得推荐的源码共享网站盘点

PingCode

开源 软件开发

定制化精准推送与用户分组策略:数智营销的硬技能

MobTech袤博科技

大数据 智能推送

蓝易云:Linux系统定时清空日志内容和删除日志文件教程。

百度搜索:蓝易云

Linux cron 云计算, 云服务器, #运维

数字化新语

数字化 信息技术 数字孪生

线性绘制在NSDT 3D场布中的应用

3D建模设计

数字孪生 3d建模 3D场布

区块链交易所开发 交易所开发源码

V\TG【ch3nguang】

数字货币交易所系统开发方案,币币合约交易所系统功能搭建

V\TG【ch3nguang】

蚂蚁集团发布 AI 安全检测平台“蚁鉴 2.0 ”,可实现用生成式能力检测生成式模型_阿里巴巴_鲁冬雪_InfoQ精选文章