9 月 13 日,2025 Inclusion・外滩大会「开源嘉年华」正在限量报名中! 了解详情
写点什么

谷歌 Apigee 添加了内置的 LLM 治理 Model Armor

作者:Leela Kumili

  • 2025-07-28
    北京
  • 本文字数:1000 字

    阅读完需:约 3 分钟

大小:491.95K时长:02:47
谷歌Apigee添加了内置的LLM治理Model Armor

谷歌云推出了 Model Armor 的公开预览版,这是一个集成到 Apigee API 管理平台的原生大语言模型(LLM)治理框架。一篇社区帖子中详细介绍了 Model Armor,它引入了针对 LLM 特定策略的即开即用执行,例如提示验证、输出过滤和 API 层的 token 级控制。

 

Model Armor 直接在 Apigee 的代理层运行,在那里它使用声明性策略检查请求和响应。它适用于所有Apigee层,允许团队无论他们的订阅级别如何,都能采用 LLM 治理。LLM API 实现了强大的新客户体验和自动化,但也引入了风险,例如提示注入(LLM 的一个重要OWASP前10风险)攻击和敏感数据的暴露。

 

这些策略可以检测到越狱尝试、提示注入和个人身份信息(PII)暴露等问题,允许根据需要对输出进行编辑、更改或阻止,而无需修改下游系统。根据谷歌的说法,“有了 Model Armor,企业可以像对待传统 API 一样严格地对 LLM 流量进行同样的治理”。

 

这些控制用 Apigee 基于 XML 的策略语言表示,允许团队将 LLM 安全规则集成到现有 API 中。一个实践教程展示了如何应用这些策略,涵盖了提示检查、token 配额和与Vertex AI的集成。教程包括一个可下载的代理模板和配置 Model Armor 执行规则的分步指导。策略执行在代理层应用,以实现服务和端点之间的一致性。

 

Apigee 和 Model Armor 架构(来源:谷歌社区帖子

 

Model Armor 支持多个 LLM 提供商,包括 Vertex AI(Gemini、Meta Llama)、OpenAI、Anthropic 和自托管模型,允许在异构架构中进行集中治理。

 

此外,谷歌已将 Model Armor 与Google Kubernetes Engine(GKE)和 Security Command Center 集成。这允许组织直接在 GKE 集群中运行的推理网关或在负载均衡器上部署 Model Armor 策略。这些策略在模型提示和响应到达内部服务之前进行检查。任何违规行为都会作为安全发现出现在 Security Command Center 中,提供集中监控、预警和修复工作流程。这种集成加强了 Model-Armor 作为 LLM 流量治理和更广泛的云安全运营之间桥梁的地位。


Apigee 作为 LLM 应用程序和模型之间的网关(来源:谷歌社区帖子

 

该框架为每次策略评估记录了详细的元数据,包括触发的过滤器和执行结果。这些日志输入到 Apigee 的可观测性和日志管道中,支持监控、异常检测和 LLM 行为的事后分析。

 

虽然其他 API 网关也提供了通用流量控制,但它们通常需要自定义中间件来实现模型级安全。Model Armor 旨在通过在 Apigee 中提供原生的 LLM 特定策略执行来消除这种复杂性。

 

原文链接:

https://www.infoq.com/news/2025/07/google-apigee-llm-model-armor/

2025-07-28 15:006987

评论

发布
暂无评论
发现更多内容

为什么说低代码的出现是时代的选择?

互联网工科生

软件开发 低代码 JNPF

【教程】浅谈ios混淆和加固加密

OpenHarmony人才生态大会|润开鸿分享全国智能物联行业产教融合共同体建设实践

新消费日报

FQS:一种神奇的数仓查询优化技术

华为云开发者联盟

大数据 后端 华为云 华为云开发者联盟 华为云GaussDB(DWS)

钱包开发:钱包基础设施赋能下一代 Dapp

区块链软件开发推广运营

dapp开发 区块链开发 链游开发 NFT开发 公链开发

软件测试/人工智能丨GitHub Copilot: 改变编程体验的智能代码助手

测试人

人工智能 软件测试

DBA解决慢查询问题的利器

NineData

sql 工具 dba NineData 慢查询分析

让网页自己总结、解答、翻译、创作?你的超级助理已上线

新消费日报

AppLink+WMS,实现仓储管理一体化

谷云科技RestCloud

wms APPlink

软件工程全周期阶段支撑文件(全套原件)

金陵老街

软件测试/人工智能丨利用ChatGPT自动生成测试用例思维导图

测试人

人工智能 软件测试

从0到1手动搭建k8s集群-初始化master节点

doramingo

云计算 Kubernetes 云原生

1211 | 和PAI一起,每周玩转AI,活动开始了

阿里云大数据AI技术

#人工智能

如何用手机免费制作一张漂亮的电子贺卡?

景博

2024上海智慧城市展会(世亚智博会)促进长三角地区智慧城市发展

AIOTE智博会

智博会 上海智博会 智慧城市展

2023最新Go面经:百度滴滴小米360小红书展盟优咔科技......

王中阳Go

golang 面试题 面经 八股文 求职技巧

发布jar包到maven中央仓库

不在线第一只蜗牛

Java 仓库 镜像仓库

外贸客户如何开发西班牙市场

九凌网络

ThingsBoard 前端项目轮播图部件开发

echeverra

thingsboard

8小时保姆级教程|鹅厂重磅图像生成训练营带你玩转AI绘画

牵着蜗牛去散步

腾讯云 腾讯 AIGC AI绘画 腾讯云AI绘画

高效编程“武功秘笈”,手把手教你写一波!

伤感汤姆布利柏

如何利用淘宝商品详情关键词搜索电商API接口,实现个人收藏的梦想?

联讯数据

专家观点∣国产化价值替代之路—钢铁企业的特征管理

用友BIP

国产价值替代

软件测试/人工智能丨利用 ChatGPT 编写测试报告

测试人

人工智能 软件测试

每日一题:LeetCode-48. 旋转图像

Geek_4z9ami

面试 算法 矩阵 LeetCode 刷题

面向对象编程,看这篇就够了

不在线第一只蜗牛

面向对象 依赖关系

谷歌Apigee添加了内置的LLM治理Model Armor_Google_InfoQ精选文章