【AICon】AI 基础设施、LLM运维、大模型训练与推理,一场会议,全方位涵盖! >>> 了解详情
写点什么

结合 AWS 服务与 Kubernetes 的持续集成

  • 2019-10-18
  • 本文字数:1817 字

    阅读完需:约 6 分钟

结合 AWS 服务与 Kubernetes 的持续集成

用户可以结合 AWS 和 Kubernetes 去创建一个完全托管,可持续部署的容器应用。这种结合充分利用开源 Kubernetes 平台的容器编排能力以及 AWS 开发者工具的代码管理,编译打包和持续集成的能力


本篇文章描述了如何去创建一个可持续部署容器应用。其使用 AWS CodeCommit , AWS CodePipeline , AWS CodeBuild , 和 AWS Lambda 将容器应用部署到 Kubernetes 集群中去。在这个环境中,开发者可以专注于代码开发而无需考虑如何部署,同时这种方式总是可以保障最新的代码被部署到环境中去

什么是持续部署?

有许多的文章和会议已经发表过持续部署的实践案例, 而本文将持续部署归纳为以下几点:


  • 代码可以频繁地被部署到生产环境

  • 任何代码修改将触发低风险发布。同时也可以轻松回滚

  • 全自动化部署,仅需少量人工操作

如何使用 AWS 和 Kubernetes 去实现持续部署?

你可以以最小的人工操作为代价,用 AWS 服务自动将代码从代码仓库取出然后部署到 Kubernetes 生产集群。为了达成这个目的,你可以创建一个 pipeline,在条件满足时该 pipeline 将自动构建并且部署已提交的代码。


你可以使用下面这些服务,去创建一个 pipeline


  • AWS CodePipeline . AWS CodePipeline 是一个自动化交付服务,它模块化,可视化,自动化了软件的部署流程。在 pipeline 中可以定义若干步骤,例如从代码管理仓库中拉取代码,将代码构建成为可发布包,测试发布包,将其部署到生产环节。只有成功通过上述步骤的代码才会予以部署。同时,你可以针对 pipeline 增添一些额外的流程,例如人工批准:只有被批准的修改才会被部署到生产环节。

  • AWS CodeCommit . AWS CodeCommit 是一个安全,可扩展,托管的私有 Git 代码仓库服务。你可以将私有代码或其他文件存储在云上,同时配置 pipeline 自动获取仓库中的改动。

  • AWS CodeBuild . AWS CodeBuild 是一个 aws 上的构建服务,用来编译代码,运行单元测试和生成部署包. 同时你可以在部署之前使用 AWS CodeBuild 来构建和测试部署包。

  • AWS Lambda. AWS Lambda 是一种计算服务,该服务可以让你运行代码的同时而无需部署或者管理服务器。你可以在 pipeline 中触发 Lambda 函数来准备构建和为 Kubernetes 测试部署包。

  • Kubernetes . Kubernetes 是一个开源的自动化部署,扩容和管理容器应用的框架。 它为运行,部署和管理可扩展的容器提供了便利的平台。

持续部署到 Kubernetes 的举例:

下面这个例子,说明了如何使用 AWS 开发者工具持续将应用部署到 Kubernetes 集群



  1. 开发者将代码提交到 AWS CodeCommit 同时创建一个 pull request 来审核针对生产环境代码的修改。 当 pull request 合并到 master 分支后,AWS CodePipeline 会自动检测到代码分支上的修改,并通过 pipeline 启动针对代码修改的处理。

  2. AWS CodeBuild 将代码修改以及相关依赖包构建成为 Docker 镜像。 同时你也可以配置 pipeline 的其他步骤来测试代码或生成包。

  3. 在构建及测试步骤完成之后,Docker 镜像将被推送到 Amazon ECR

  4. AWS CodePipeline 触发 AWS Lambda 函数,该函数使用到 Kubernetes Python 客户端来对 Kubernetes 进行操作。 Lambda 函数将 Kubernetes deployment 配置文件中 Docker Image tag 替换为刚被推送到 ECR 中的镜像

  5. 在 Kubernetes deployment 的参数修改完之后,AWS Lambda 将调用 Kubernetes API 去重新部署 Kubernetes deployment 以完成 deployment 中 docker 镜像的更新

  6. Kubernetes 将使用会滚动升级 pods 中的应用,使得所有 pod 都使用 ECR 中的相应 docker 镜像。至此为止,Pipeline 成功响应了 CodeCommit 上 master 代码分支的修改。同时该 pipeline 很容易扩展,你可以在代码被部署到生产环节之前,增加测试环节或者增加部署到预生产环境的环节


下面展示了一个支持该流程的 AWS CodePipeline 的例子:


结论:

我们非常高兴你能使用这些 pipeline 更为轻松的在 Kuberntes 上开发和部署容器应用。你可以在 CodeSuite – Continuous Deployment Reference Architecture for Kubernetes上找到更多相关的 AWS CloudFormation 模版。该仓库详细的描述了如何创建 pipeline 并使用它去部署应用。 如果有更多的问题,意见,反馈,请及时让我们知道。


作者介绍:


张恒


AWS 中国区专业服务咨询顾问,拥有多年互联网开发经验,精通虚拟化及容器技术。
复制代码


本文转载自 AWS 技术博客。


原文链接:


https://amazonaws-china.com/cn/blogs/china/continuous-deployment-to-kubernetes-using-aws-codepipeline-aws-codecommit-aws-codebuild-amazon-ecr-and-aws-lambda/


2019-10-18 08:00827
用户头像

发布了 1837 篇内容, 共 93.1 次阅读, 收获喜欢 73 次。

关注

评论

发布
暂无评论
发现更多内容

数字未来:世界正走向新的“破茧时刻”

脑极体

华为

学会 Go select 语句,轻松实现高效并发

陈明勇

Go golang 高并发 select 三周年连更

上线控制台,降低使用门槛|Higress 1.0.0 RC 版本发布

阿里巴巴云原生

阿里云 云原生 Higress

Qz学算法-数据结构篇(排序算法--基数、总结)

浅辄

数据结构 三周年连更

音视频八股文(4)--ffmpeg常见命令(3)

福大大架构师每日一题

音视频 ffmpeg

Kubernetes网络模型分析

王玉川

Kubernetes 云原生 网络 iptables cluster

photoshop 2023【存储为窗口显示空白、黑屏】解决方法

Rose

ps 2023储存黑屏 Photoshop 2023

《精进3:找到你的潜在生态位》

石云升

读书笔记 三周年连更

R 编程并发的基础知识有哪些?

海拥(haiyong.site)

三周年连更

TestNG 中使用 Guice 来进行依赖注入

HoneyMoose

Unity 之 关于停止协程的五种方式解析

陈言必行

Unity 三周年连更

Android调用WebService

智趣匠

HTTP WebService 三周年连更

Shell脚本从入门到精通

袁袁袁袁满

三周年连更

Koordinator 一周年,新版本 v1.2.0 支持节点资源预留,兼容社区重调度策略

阿里巴巴云原生

阿里云 开源 云原生 Koordinator

精进云原生 - Dubbo 3.2 正式发布

阿里巴巴云原生

阿里云 云原生 dubbo

Oracle apex社区教程 PLSQL常用时间函数

back_wang

oracle apex

微服务 SpringBoot 整合 Redis GEO 实现附近商户功能

Bug终结者

java; Redis 核心技术与实战 三周年连更

如何在 Linux 中查找文件所有者?

wljslmz

三周年连更

发现了一个对公有云资源进行规范管理的方法

cynthia

公有云 云管平台 安全合规

Kubernetes架构解析

乌龟哥哥

三周年连更

Matlab实现光伏发电电池模型

Shine

三周年连更

如何使用 Java 将 JSON 文件读取为字符串?这三种方法很管用!

Java架构历程

三周年连更

职业规划:如何面对“程序员失业”?| 社区征文

ninetyhe

人工智能 AI 大龄程序员 三周年征文

Shell脚本实战:Consul 服务注册和注销的最佳实践

小毛驴的烂笔头

Linux Shell

Downie下载vip会员视频教程?Downie4最新许可证

Rose

Downie下载 Downie使用教程 Downie 4许可证 Mac视频下载器 Downie破解版

达芬奇18补丁版下载 支持m1/m2/intel/win

Rose

DaVinci Resolve 18 达芬奇18破解版 视频剪辑调色软件

测试需求平台8-Arco组件实现产品增改需求

MegaQi

测试平台开发 三周年连更 AcroVue

极客时间「大师课·深度剖析 RocketMQ5.0」上线啦,欢迎免费领取!

阿里巴巴云原生

阿里云 RocketMQ 云原生

INFINI 产品更新|Console v1.0 版本正式发布

极限实验室

elasticsearch console Gateway infini 极限网关

Oracle Apex学习之系统变量

back_wang

oracle ebs oracle apex

python时间序列预测之Holt-Winters

AIWeker

Python 机器学习 时间序列 三周年连更

结合 AWS 服务与 Kubernetes 的持续集成_文化 & 方法_亚马逊云科技 (Amazon Web Services)_InfoQ精选文章