写点什么

谷歌 Apigee 添加了内置的 LLM 治理 Model Armor

作者:Leela Kumili

  • 2025-07-28
    北京
  • 本文字数:1000 字

    阅读完需:约 3 分钟

大小:491.95K时长:02:47
谷歌Apigee添加了内置的LLM治理Model Armor

谷歌云推出了 Model Armor 的公开预览版,这是一个集成到 Apigee API 管理平台的原生大语言模型(LLM)治理框架。一篇社区帖子中详细介绍了 Model Armor,它引入了针对 LLM 特定策略的即开即用执行,例如提示验证、输出过滤和 API 层的 token 级控制。

 

Model Armor 直接在 Apigee 的代理层运行,在那里它使用声明性策略检查请求和响应。它适用于所有Apigee层,允许团队无论他们的订阅级别如何,都能采用 LLM 治理。LLM API 实现了强大的新客户体验和自动化,但也引入了风险,例如提示注入(LLM 的一个重要OWASP前10风险)攻击和敏感数据的暴露。

 

这些策略可以检测到越狱尝试、提示注入和个人身份信息(PII)暴露等问题,允许根据需要对输出进行编辑、更改或阻止,而无需修改下游系统。根据谷歌的说法,“有了 Model Armor,企业可以像对待传统 API 一样严格地对 LLM 流量进行同样的治理”。

 

这些控制用 Apigee 基于 XML 的策略语言表示,允许团队将 LLM 安全规则集成到现有 API 中。一个实践教程展示了如何应用这些策略,涵盖了提示检查、token 配额和与Vertex AI的集成。教程包括一个可下载的代理模板和配置 Model Armor 执行规则的分步指导。策略执行在代理层应用,以实现服务和端点之间的一致性。

 

Apigee 和 Model Armor 架构(来源:谷歌社区帖子

 

Model Armor 支持多个 LLM 提供商,包括 Vertex AI(Gemini、Meta Llama)、OpenAI、Anthropic 和自托管模型,允许在异构架构中进行集中治理。

 

此外,谷歌已将 Model Armor 与Google Kubernetes Engine(GKE)和 Security Command Center 集成。这允许组织直接在 GKE 集群中运行的推理网关或在负载均衡器上部署 Model Armor 策略。这些策略在模型提示和响应到达内部服务之前进行检查。任何违规行为都会作为安全发现出现在 Security Command Center 中,提供集中监控、预警和修复工作流程。这种集成加强了 Model-Armor 作为 LLM 流量治理和更广泛的云安全运营之间桥梁的地位。


Apigee 作为 LLM 应用程序和模型之间的网关(来源:谷歌社区帖子

 

该框架为每次策略评估记录了详细的元数据,包括触发的过滤器和执行结果。这些日志输入到 Apigee 的可观测性和日志管道中,支持监控、异常检测和 LLM 行为的事后分析。

 

虽然其他 API 网关也提供了通用流量控制,但它们通常需要自定义中间件来实现模型级安全。Model Armor 旨在通过在 Apigee 中提供原生的 LLM 特定策略执行来消除这种复杂性。

 

原文链接:

https://www.infoq.com/news/2025/07/google-apigee-llm-model-armor/

2025-07-28 15:001

评论

发布
暂无评论
发现更多内容

在Windows11下使用WSL编译Tikv9.0

TiDB 社区干货传送门

安装 & 部署

【TiDB 社区智慧合集】 TiDB x 运营商|掌上营业厅、账务、物联网等多核心业务场景的实战应用案例

TiDB 社区干货传送门

YashanDB的热备份与冷备份机制讲解

数据库砖家

YashanDB的数据加密功能,保护敏感信息的方法

数据库砖家

YashanDB日志审计功能,满足合规性需求

数据库砖家

YashanDB的扩展应用:推动新兴技术的发展

数据库砖家

YashanDB的数据质量管理,确保准确与完整性的方法

数据库砖家

医患协同在线诊疗解决方案

微擎应用市场

最受欢迎的三方库之harmony-dialog

桃花镇童长老

HarmonyOS

YashanDB的性能监测与调试综合方案

数据库砖家

YashanDB日志管理策略,便于问题追踪与调试

数据库砖家

服务器断电,PD集群无法启动,修复PD集群及cluster ID mismatch问题

TiDB 社区干货传送门

8.x 实践

最受欢迎的三方库之harmony-web

桃花镇童长老

HarmonyOS ArkTS

最受欢迎的三方库之EventBus

桃花镇童长老

HarmonyOS

YashanDB的未来发展趋势

数据库砖家

YashanDB的写入性能与读取性能哪个更优?

数据库砖家

程序员必看!30 分钟集成一键登录 SDK

MobTech袤博科技

YashanDB的企业级应用特性与优势分析

数据库砖家

YashanDB的学习资源与文档下载入口

数据库砖家

鸿蒙推送适配指南:3 步极速集成

MobTech袤博科技

程序员夜话:5 年 SDK 体积瘦身史

MobTech袤博科技

全文搜索功能已上线 TiDB Could Serverless(附实践教程)

TiDB 社区干货传送门

YashanDB的可维护性如何保障企业的长期发展?

数据库砖家

36 节点排查:推送丢失溯源指南

MobTech袤博科技

美业数字化运营解决工具

微擎应用市场

【FAQ】HarmonyOS SDK 闭源开放能力 —Push Kit(13)

HarmonyOS SDK

harmoyos

从开发者角度看数据库架构进化史:JDBC - 中间件 - TiDB

TiDB 社区干货传送门

YashanDB的数据压缩功能如何提升存储效率

数据库砖家

YashanDB的性能测试工具,评估数据库效率的利器

数据库砖家

YashanDB的扩展性如何支持企业未来的需求?

数据库砖家

YashanDB的优点:打造高效存储系统的关键

数据库砖家

谷歌Apigee添加了内置的LLM治理Model Armor_Google_InfoQ精选文章