写点什么

代码里明明配置了鉴权,服务却仍暴露公网:Shopify 不再相信代码仓库

作者:Claudio Masolo
  • 2026-11-18
    北京
  • 本文字数:1825 字

    阅读完需:约 6 分钟

AI摘要

Shopify 自研 Overexposed 工具,通过 Cloud Asset Inventory 与匿名 HTTP 探测替代纯代码扫描,显著提升 GKE Ingress 和 Cloud Run 外部暴露面识别准确率。新架构规避了配置意图与运行时实际状态的偏差问题,误报率大幅下降,覆盖此前遗漏的跨仓库资源。

代码即意图,集群状态才是真实暴露面;Cloud Asset Inventory 提供经准入控制器处理后的权威资源视图;无需集群凭证即可获取访问策略,兼顾安全与可观测性。

适合云平台工程师、SRE、应用安全工程师阅读。

Shopify 推出了内部扫描工具 Overexposed,用于定位 GKE 上的 Kubernetes Ingress 和 Cloud Run 服务,并检查它们是否能够在没有身份验证的情况下从互联网访问。该工具的第一个版本基于代码仓库中的配置文件,但存在误报和盲区,因此团队使用 GCP Cloud Asset Inventory 和匿名 HTTP 探测重新构建了整个系统。经过短短几周的调优,Ingress 结果中无法确定的比例下降了约 80%。

最初的扫描器会在基础设施代码仓库中查找 Ingress,重点关注没有配置身份验证的公共主机名,随后对其进行探测。Shopify 表示,这种方法在三个方面存在问题。团队直接配置代理身份验证注解时,会触发误报。准入控制器会在准入阶段改写设置,但并非所有集群都运行相同的控制器,因此看起来正确的配置实际上可能没有生效。由其他代码仓库或平台工具创建的 Ingress 则完全不会被发现。作者将其中的经验总结为:代码仓库展示的是意图,集群展示的才是实际执行的结果。

当前版本会按照计划定期运行,并查询 Cloud Asset Inventory。该资产清单包含经过准入处理、已被 GKE 接受的 Ingress,以及 Cloud Run 服务和负载均衡器。另一次查询则会在不需要集群凭证的情况下获取访问策略。资产清单还发现了第一个版本从未覆盖过的项目中的 Cloud Run 服务。

随后,扫描器会向每个候选目标发送一次匿名请求。它首先发送 HEAD 请求,失败后改用 GET,最多跟随三次重定向,并检查重定向链中的每一跳。它还会测试 /ADMIN 等路径变体,因为路径规则可能区分大小写。结果会被归类为六种判定:已暴露、符合预期、受保护、未找到、无法访问和无法确定。“符合预期”表示端点虽然公开,但与经过审查、写在代码中的允许列表条目完全匹配,包括主机名和路径。允许列表中的端点仍会在每次运行时接受探测;如果某个端点后来受到保护或已经消失,对应条目就会被标记为过期。

Shopify 强调,状态码必须结合上下文理解。Ingress 后方出现 404,意味着代理已经作出响应,只是请求路径不存在。但对于 Cloud Run,Google 前端可能在应用开始运行前就返回 404,因此扫描器会将其判定为无法确定。403 同样不会被直接视为端点受到保护的证据。对于 Cloud Run,扫描器会区分入口设置与 IAM:只有当 allUsers 拥有调用者角色,或者调用者检查被禁用时,服务才属于公开状态。位于负载均衡器后的服务会使用 URL Map,由它决定每条路径对应哪个后端,同时也能显示哪些位置要求使用 Identity-Aware Proxy 等身份验证机制。

在早期运行中,某次 7 月扫描约有四分之三的结果无法确定。团队按照原因对结果进行分组,在证据充分的地方增加明确判定,并在发布前使用已保存的扫描结果回放规则变更。如果证据仍不充分,结果就会继续保留为无法确定,而不会默认判定为受保护。扫描器会保存判定结果、判定原因和负责团队,但不会存储响应正文或凭证。

由于扫描器会向任意主机名发出外部请求,Shopify 对其进行了加固,以防范服务端请求伪造(SSRF)。它会验证 DNS 返回的每个 IP 地址,拒绝私有地址和环回地址,并直接连接经过检查的 IP,以防止 DNS 重绑定,同时在每次重定向时重复执行检查。作者还建议限制扫描器的网络出站访问,包括对云元数据端点的访问。

团队使用 AI 编码智能体和 AI 代码审查构建了 Overexposed。为了发现测试虽然通过、却验证了错误内容的情况,他们会对安全防护逻辑执行变异测试,并为每一种判定结果保留一个金丝雀目标。

Shopify 的实践揭示了公网暴露扫描中普遍存在的两种思路。基于规则的检查,例如 Trend Micro 的 Cloud Run 规则,会查找 allUsers 绑定。这种方式成本较低,也很容易集成到 CI 中。但此类工具反映的是配置意图,而不是实际执行结果,因此会漏掉在代码仓库之外创建的资源,以及后来被准入控制器改写的设置。

基于资产清单的方法,例如 Cartography 和 Shopify Overexposed 背后的 Cloud Asset Inventory 查询,会从云平台实际运行的资源出发,从而弥补这些盲区。不过,Cartography 仍然根据配置推导 exposed_internet 标志,因此无法确认外部访问者实际看到了什么。Overexposed 在资产清单之上增加了匿名探测、允许列表和基于证据的判定机制。面对不确定的证据,它会给出“无法确定”,而不是“受保护”。

对于希望构建类似系统的团队,应将资产清单作为主要事实来源,同时保留配置分析,将其作为 CI 中的早期信号。只有在资产清单无法证明访问控制是否真正生效时,才需要加入主动探测。

原文链接:

https://www.infoq.com/news/2026/11/shopify-kubernetes-ingresses/