写点什么

从 0 到 1 了解 CI/CD:初学者入门必备

  • 2020-05-16
  • 本文字数:3642 字

    阅读完需:约 12 分钟

从0到1了解CI/CD:初学者入门必备

现代软件开发的需求加上部署到不同基础设施的复杂性使得创建应用程序成为一个繁琐的过程。当应用程序出现规模性增长,开发团队人员变得更分散时,快速且不断地生产和发布软件的流程将会变得更加困难。


为了解决这些问题,开发团队开始探索新的策略来使他们的构建、测试和发布流程自动化,以帮助其更快地部署新的生产。这就是持续交付和持续集成发展的由来。


本文将介绍什么是 CI/CD 并且它是如何帮助团队迅速开发部署经过充分测试、可靠的软件。在了解 CI/CD 及其优势之前,我们应该讨论这些系统构建的一些先决技术和实践。

自动构建流程

在软件开发过程中,构建流程会将开发人员生成的代码转换为可执行的可用软件。对于 Go 或者 C 语言等编译语言,此阶段需要通过编译器运行源代码以生成独立的二进制文件。对于 Python 或 PHP 等解释性语言,没有编译的步骤,但是代码依旧需要在特定的时间内冻结、绑定依赖项、打包以便于分发。这些过程通常称为“构建”或“发布”的工件。


虽然开发人员可以手动构建,但这样操作有诸多不利。首先,从主动开发到创建构建的转变中引入了上下文转换,使得开发人员不得不停止生产效率更高的工作来专注于构建过程。其次,每个开发人员都在制作自己的工件,这可能导致构建过程不一致。


为了解决这些顾虑,许多开发团队配置了自动构建流水线。这些系统监视源代码存储库,并在检测到更改时自动启动预配置的构建过程。这一配置无需牵涉过多的人力在其中并且确保了每个构建过程一致。


市场上有许多帮助用户自动化这些步骤的构建工具,以下列出了在 Java 生态下比较受欢迎的构建工具:


  • Ant: Apache Ant 是一个开源 Java 库,创建于 2000 年。它是 Java 领域的原始构建工具,至今仍然被频繁使用。

  • Maven: Apache Maven 是一个自动化构建工具,主要是为 Java 项目编写的。不同于 Apache Ant,Maven 遵循约定优于配置的原则,仅需要针对偏离合理默认值的构建过程的方面进行配置。

  • Gradle: 在 2012 年推出的 1.0 版本中,Gradle 尝试通过结合 Maven 的现代功能来融合 Ant 和 Maven 的优势,同时又不失 Ant 提供的灵活性。构建指令是用一种名为 Groovy 的动态语言编写的。尽管在这个领域,这是一个相对比较新的工具,但它已被广泛采用。

版本控制

大部分现代软件开发需要在共享的代码库中进行频繁协作。版本控制系统(VCS)用于帮助维护项目历史记录,并行处理离散特征,以及解决存在冲突的更改。VCS 允许项目轻松采用更改并在出现问题时回滚。开发人员可以在本地计算机上处理项目,并使用 VCS 来管理不同的开发分支。


记录在 VCS 中的每个更改都称为提交。每个提交都对代码库的更改进行编目分类,元数据也包含在其中,例如关于查看提交历史记录或合并更新的描述。



图 1 分布式版本控制


虽然版本控制是一个十分有价值的工具,它能帮助管理在单一代码库中许多不同的更改。但分布式开发通常会为其带来挑战。在没有定期合并到共享集成分支的情况下在代码库的独立分支中进行开发可能会使以后合并更改变得困难。为了避免这一情况,开发人员开始采纳持续集成实践。

持续集成(CI)

持续集成(CI) 是一个让开发人员将工作集成到共享分支中的过程,从而增强了协作开发。频繁的集成有助于解决隔离,减少每次提交的大小,以降低合并冲突的可能性。


为了鼓励 CI 实践,一个强大的工具生态已经构建起来。这些系统集成了 VCS 库,当检测到更改时,可以自动运行构建脚本并且测试套件。集成测试确保不同组件功能可以在一个组内兼容,使得团队可以尽早发现兼容性的 bug。因此,持续集成所生产的构建是经过充分测试的,并且是完全可靠的。



图 2 持续集成的过程

持续交付和持续部署(CD)

持续交付和持续部署 是在构建持续集成的基础之上的两种策略。 持续交付 是持续集成的扩展,它将构建从集成测试套件部署到预生产环境。这使得它可以直接在类生产环境中评估每个构建,因此开发人员可以在无需增加任何工作量的情况下,验证 bug 修复或者测试新特性。一旦部署到 staging 环境中,就可能需要进行额外的手动和自动测试。


持续部署 则更进一步。一旦构建在 staging 环境中通过了自动测试,持续部署系统将会自动将它部署到生产服务器上。换言之,每个通过测试的构建都是实时的,可供用户及早反馈。这使得团队可以不断发布新特性和修复 bug,并以其测试流程提供的保证为后盾。



图 3 CI / CD 流程路线图

CI/CD 的优势

持续集成、交付和部署对软件开发过程有显著的改进。下文将简单介绍一些 CI/CD 的主要优势:

快速反馈回路

对于一个快速的开发周期,快速反馈回路显得尤为重要。为了能够实时接收反馈,软件必须迅速触达终端用户。而 CI / CD 可以通过简化更新生产部署来提供实现此目标的平台。通过要求每个更改都经过严格的测试,CI 可以帮助降低每个构建的相关风险并因此使得团队可以便捷地向用户发布有价值的特性。

增加可见度

CI/CD 通常是指将 IT 流程的各个步骤按序列组成一条流水线,且该流水线对整个 IT 团队(包括开发、测试、运维等团队)均可见。因此,每个团队成员可以跟踪系统中的构建状态并且可以确定任何导致测试失败的构建。团队成员通过深入了解代码库的当前状态,可以更轻松地规划最佳行动方案。这样的可见度为这一问题提供了一个明确的答案——“我提交的更改是否破坏了构建?”

简化故障排除

尽管 CI 的目标是集成并测试每个发生在代码库中的更改,但是更安全的方式是每次提交都是小型的并尽早将它们合并到共享代码存储库中。如此,当找到 bug 时,确定和问题相关的更改会更加容易。毕竟,根据问题的严重程度,团队可以选择回滚或编写并提交修复,从而减少生产中解决问题的时间。

软件质量更高

自动化构建和部署流程不仅缩短了开发周期,而且帮助团队开发出品质更好的软件。因为每个更改都会经过充分的测试并且至少会部署在一个预生产环境中,因此团队可以毫无顾虑地将更改部署到生产中。不过,只有当代码库的所有级别,从单元测试到更复杂的系统测试,都有良好的测试覆盖率时,才能实现这一点。

集成问题更少

因为自动化测试套件在每次提交时自动生成的构建上运行,所以可以尽早检测并修复集成问题。这使开发人员能够及早了解当前正在进行的工作是否可能影响其代码。它会在一开始就测试由不同贡献者编写的代码是否兼容,而不是在之后可能出现其他问题的时候才开始测试。

有更多的时间专注于开发

CI/CD 系统依赖自动化来生产构建并且通过流水线来迁移新的更改。由于不需要手动干预,因此构建和测试不再占用开发团队大块的时间。进而开发人员可以心无旁骛地对代码库进行有效的更改,因为如果构建过程中出现任何问题,自动化系统会通知他们。

持续集成和交付的最佳实践

既然我们已经了解了使用 CI/CD 的一些优势,那么接下来,我们将讨论一些指导原则来帮助您成功实现这些流程。

对 CI / CD 流水线负责

开发者直到更改被部署到预生产环境中,才无需对其提交的代码负责。这意味着开发者必须确保他们的代码集成正确并且随时可以部署。如果提交的更改违反了这些要求,则开发人员有责任快速提交修复以避免影响其他人的工作。构建失败应该暂停流水线并阻止不参与修复故障的提交,这使得快速解决构建问题变得至关重要。

确保部署一致

部署过程不需要手动操作,反而流水线需要自动部署流程以确保一致性和可重复性。这减少了将破坏性构建推向生产的可能性,并有助于避免出现一些难以重现的、未经测试的配置。

将代码库提交到版本控制

将每次更改提交到版本控制是十分重要的。这会帮助团队审核所有提交的变更并且让团队可以简单地还原出现问题的提交。同时,也可以保持配置、脚本、数据库和文档的完整性。如果没有版本控制,特别是当多人使用同一个代码库时,会非常容易丢失配置和代码更改或对其处理不当。

提交小的、渐进的更改

开发人员一定要牢记:更改必须是小的。因为等待引入更大批量的更改会延迟测试反馈,会更难以确定问题的根本原因。

良好的测试覆盖率

由于 CI / CD 的目的是减少手动测试,因此整个代码库应该有一个良好的自动化测试覆盖率,以确保软件按预期运行。此外,还应该定期清理冗余或过时的测试以避免影响流水线。


测试套件中不同类型测试的比例应和“测试金字塔”模型相似。大多数测试应该是单元测试,因为它们拥有基本功能的同时还可以快速执行。此外,还要有较少数量的集成测试,以确保组件可以一起成功运行。最后,应在测试周期结束时包含少量回归、UI、系统和端到端测试,以确保构建满足项目的所有行为要求。可以使用像 JaCoCo 这样的工具来确定测试套件涵盖了多少代码库。



图 4 测试金字塔

结语

CI/CD 的出现大大提高了开发团队的生产效率,缩短了开发周期。其敏捷、稳定、可靠的特性,也越来越被企业所青睐与需要。本文先介绍了系统构建的先决技术与实践,自动化构建、版本控制,并给出了 Java 环境下一些构建工具,然后分别介绍了持续集成(CI)、持续交付和持续部署(CD)的概念及其优势,并在最后给出了一些最佳实践,如确保部署一致、保证良好的测试覆盖率等。希望能帮助大家厘清 CI/CD 的特性及功能,同时也希望 CI/CD 的初学者能藉由本文得以入门。


2020-05-16 17:161297

评论

发布
暂无评论
发现更多内容

ElasticSearch必知必会-Reindex重建索引

京东科技开发者

elasticsearch 索引 ES 集群 企业号 3 月 PK 榜

喜讯|百度入选“移动互联网APP产品安全漏洞治理”优秀案例

百度安全

CleanMyMac4.20专业的mac清理软件

茶色酒

CleanMyMac4.20

支付宝小程序-MQTT模拟器体验阿里云IoT开发——设备接入类

阿里云AIoT

物联网

跨平台开发成为移动应用程序开发趋势

没有用户名丶

国产操作系统应用开发的趋势与挑战

没有用户名丶

亿级用户中心的设计与实践

做梦都在改BUG

Java 服务架构 亿级流量 用户中心

国家中心城市手机银行发展洞察

易观分析

金融 经济 手机银行 城市

利用 ModelScope 社区开源模型,实现低资源场景下的零样本文本分类

阿里技术

深度学习 自然语言模型

设备使用HTTPS协议接入IoT物联网平台——设备接入类

阿里云AIoT

OPPO、京东云 loT 项目数据架构改造,数据处理痛点这样破解

TDengine

tdengine 数据架构 时序数据库 用户案例 loT

业务架构那点事(2)如何通过高层访谈获取企业战略信息?

涛哥 数字产品和业务架构

业务架构 访谈

通过Flutter实现一个能在多端运行的扫雷游戏

编程的平行世界

flutter 前端 游戏 移动端 扫雷

使用抓包工具Wireshark分析IoT设备网络行为——设备管理运维类

阿里云AIoT

网络协议 物联网 网络性能优化

中国流程挖掘迎来新“启点”,望繁信科技全面升级

ToB行业头条

Last Week in Milvus

Zilliz

Milvus Zilliz 向量数据库

解决 Parallels Desktop 虚拟机不能连网的问题

魔仙苹果mac堡

Parallels Desktop 虚拟机 PD虚拟机不能联网 PD常见问题

虎牙SRE谈可观测:如何做到比用户和老板更早发现业务异常?

TakinTalks稳定性社区

Spring源码解析-Spring 事务

Java你猿哥

Java spring Spring Boot ssm spring 源码

K8S部署应用详解

tiandizhiguai

面面俱到!四面阿里拿offer后,才发现师哥给的面试笔记有多强大

做梦都在改BUG

Java java面试 Java八股文 Java面试题 Java面试八股文

Mac教程:如何开启任何来源选项

魔仙苹果mac堡

Mac 苹果电脑 任何来源

「危险」的ChatGPT,聊天机器人式越狱,带来的法律挑战

这我可不懂

低代码平台 ChatGPT JNPF

Spring源码解析-Spring AOP

Java你猿哥

Java 源码 云原生 Spring Boot ssm

SpringBoot项目就连创建目录都让人抓狂

做梦都在改BUG

Java Spring Boot 框架

你值得拥有的IoT 物联网平台开发实用技巧(一)——数据价值类

阿里云AIoT

如何在 macOS 中互换 Control 和 Command 键

魔仙苹果mac堡

mac教程 Control键 Command 键

订阅标识符与订阅选项--MQTT 5.0新特性

EMQ映云科技

物联网 IoT mqtt 订阅 企业号 3 月 PK 榜

业务系统故障率居高不下:有哪些非常有效的治理大招?

TakinTalks稳定性社区

图片无损放大:Topaz Gigapixel AI 激活版

真大的脸盆

Mac Mac 软件 图片无损放大 图片编辑 图片放大

真香!阿里最新出品Java面试核心讲(终极版),Github已星标50K

程序员小毕

Java 程序员 面试 后端 架构师

从0到1了解CI/CD:初学者入门必备_文化 & 方法_Rancher_InfoQ精选文章