写点什么

从 0 到 1 了解 CI/CD:初学者入门必备

  • 2020-05-16
  • 本文字数:3642 字

    阅读完需:约 12 分钟

从0到1了解CI/CD:初学者入门必备

现代软件开发的需求加上部署到不同基础设施的复杂性使得创建应用程序成为一个繁琐的过程。当应用程序出现规模性增长,开发团队人员变得更分散时,快速且不断地生产和发布软件的流程将会变得更加困难。


为了解决这些问题,开发团队开始探索新的策略来使他们的构建、测试和发布流程自动化,以帮助其更快地部署新的生产。这就是持续交付和持续集成发展的由来。


本文将介绍什么是 CI/CD 并且它是如何帮助团队迅速开发部署经过充分测试、可靠的软件。在了解 CI/CD 及其优势之前,我们应该讨论这些系统构建的一些先决技术和实践。

自动构建流程

在软件开发过程中,构建流程会将开发人员生成的代码转换为可执行的可用软件。对于 Go 或者 C 语言等编译语言,此阶段需要通过编译器运行源代码以生成独立的二进制文件。对于 Python 或 PHP 等解释性语言,没有编译的步骤,但是代码依旧需要在特定的时间内冻结、绑定依赖项、打包以便于分发。这些过程通常称为“构建”或“发布”的工件。


虽然开发人员可以手动构建,但这样操作有诸多不利。首先,从主动开发到创建构建的转变中引入了上下文转换,使得开发人员不得不停止生产效率更高的工作来专注于构建过程。其次,每个开发人员都在制作自己的工件,这可能导致构建过程不一致。


为了解决这些顾虑,许多开发团队配置了自动构建流水线。这些系统监视源代码存储库,并在检测到更改时自动启动预配置的构建过程。这一配置无需牵涉过多的人力在其中并且确保了每个构建过程一致。


市场上有许多帮助用户自动化这些步骤的构建工具,以下列出了在 Java 生态下比较受欢迎的构建工具:


  • Ant: Apache Ant 是一个开源 Java 库,创建于 2000 年。它是 Java 领域的原始构建工具,至今仍然被频繁使用。

  • Maven: Apache Maven 是一个自动化构建工具,主要是为 Java 项目编写的。不同于 Apache Ant,Maven 遵循约定优于配置的原则,仅需要针对偏离合理默认值的构建过程的方面进行配置。

  • Gradle: 在 2012 年推出的 1.0 版本中,Gradle 尝试通过结合 Maven 的现代功能来融合 Ant 和 Maven 的优势,同时又不失 Ant 提供的灵活性。构建指令是用一种名为 Groovy 的动态语言编写的。尽管在这个领域,这是一个相对比较新的工具,但它已被广泛采用。

版本控制

大部分现代软件开发需要在共享的代码库中进行频繁协作。版本控制系统(VCS)用于帮助维护项目历史记录,并行处理离散特征,以及解决存在冲突的更改。VCS 允许项目轻松采用更改并在出现问题时回滚。开发人员可以在本地计算机上处理项目,并使用 VCS 来管理不同的开发分支。


记录在 VCS 中的每个更改都称为提交。每个提交都对代码库的更改进行编目分类,元数据也包含在其中,例如关于查看提交历史记录或合并更新的描述。



图 1 分布式版本控制


虽然版本控制是一个十分有价值的工具,它能帮助管理在单一代码库中许多不同的更改。但分布式开发通常会为其带来挑战。在没有定期合并到共享集成分支的情况下在代码库的独立分支中进行开发可能会使以后合并更改变得困难。为了避免这一情况,开发人员开始采纳持续集成实践。

持续集成(CI)

持续集成(CI) 是一个让开发人员将工作集成到共享分支中的过程,从而增强了协作开发。频繁的集成有助于解决隔离,减少每次提交的大小,以降低合并冲突的可能性。


为了鼓励 CI 实践,一个强大的工具生态已经构建起来。这些系统集成了 VCS 库,当检测到更改时,可以自动运行构建脚本并且测试套件。集成测试确保不同组件功能可以在一个组内兼容,使得团队可以尽早发现兼容性的 bug。因此,持续集成所生产的构建是经过充分测试的,并且是完全可靠的。



图 2 持续集成的过程

持续交付和持续部署(CD)

持续交付和持续部署 是在构建持续集成的基础之上的两种策略。 持续交付 是持续集成的扩展,它将构建从集成测试套件部署到预生产环境。这使得它可以直接在类生产环境中评估每个构建,因此开发人员可以在无需增加任何工作量的情况下,验证 bug 修复或者测试新特性。一旦部署到 staging 环境中,就可能需要进行额外的手动和自动测试。


持续部署 则更进一步。一旦构建在 staging 环境中通过了自动测试,持续部署系统将会自动将它部署到生产服务器上。换言之,每个通过测试的构建都是实时的,可供用户及早反馈。这使得团队可以不断发布新特性和修复 bug,并以其测试流程提供的保证为后盾。



图 3 CI / CD 流程路线图

CI/CD 的优势

持续集成、交付和部署对软件开发过程有显著的改进。下文将简单介绍一些 CI/CD 的主要优势:

快速反馈回路

对于一个快速的开发周期,快速反馈回路显得尤为重要。为了能够实时接收反馈,软件必须迅速触达终端用户。而 CI / CD 可以通过简化更新生产部署来提供实现此目标的平台。通过要求每个更改都经过严格的测试,CI 可以帮助降低每个构建的相关风险并因此使得团队可以便捷地向用户发布有价值的特性。

增加可见度

CI/CD 通常是指将 IT 流程的各个步骤按序列组成一条流水线,且该流水线对整个 IT 团队(包括开发、测试、运维等团队)均可见。因此,每个团队成员可以跟踪系统中的构建状态并且可以确定任何导致测试失败的构建。团队成员通过深入了解代码库的当前状态,可以更轻松地规划最佳行动方案。这样的可见度为这一问题提供了一个明确的答案——“我提交的更改是否破坏了构建?”

简化故障排除

尽管 CI 的目标是集成并测试每个发生在代码库中的更改,但是更安全的方式是每次提交都是小型的并尽早将它们合并到共享代码存储库中。如此,当找到 bug 时,确定和问题相关的更改会更加容易。毕竟,根据问题的严重程度,团队可以选择回滚或编写并提交修复,从而减少生产中解决问题的时间。

软件质量更高

自动化构建和部署流程不仅缩短了开发周期,而且帮助团队开发出品质更好的软件。因为每个更改都会经过充分的测试并且至少会部署在一个预生产环境中,因此团队可以毫无顾虑地将更改部署到生产中。不过,只有当代码库的所有级别,从单元测试到更复杂的系统测试,都有良好的测试覆盖率时,才能实现这一点。

集成问题更少

因为自动化测试套件在每次提交时自动生成的构建上运行,所以可以尽早检测并修复集成问题。这使开发人员能够及早了解当前正在进行的工作是否可能影响其代码。它会在一开始就测试由不同贡献者编写的代码是否兼容,而不是在之后可能出现其他问题的时候才开始测试。

有更多的时间专注于开发

CI/CD 系统依赖自动化来生产构建并且通过流水线来迁移新的更改。由于不需要手动干预,因此构建和测试不再占用开发团队大块的时间。进而开发人员可以心无旁骛地对代码库进行有效的更改,因为如果构建过程中出现任何问题,自动化系统会通知他们。

持续集成和交付的最佳实践

既然我们已经了解了使用 CI/CD 的一些优势,那么接下来,我们将讨论一些指导原则来帮助您成功实现这些流程。

对 CI / CD 流水线负责

开发者直到更改被部署到预生产环境中,才无需对其提交的代码负责。这意味着开发者必须确保他们的代码集成正确并且随时可以部署。如果提交的更改违反了这些要求,则开发人员有责任快速提交修复以避免影响其他人的工作。构建失败应该暂停流水线并阻止不参与修复故障的提交,这使得快速解决构建问题变得至关重要。

确保部署一致

部署过程不需要手动操作,反而流水线需要自动部署流程以确保一致性和可重复性。这减少了将破坏性构建推向生产的可能性,并有助于避免出现一些难以重现的、未经测试的配置。

将代码库提交到版本控制

将每次更改提交到版本控制是十分重要的。这会帮助团队审核所有提交的变更并且让团队可以简单地还原出现问题的提交。同时,也可以保持配置、脚本、数据库和文档的完整性。如果没有版本控制,特别是当多人使用同一个代码库时,会非常容易丢失配置和代码更改或对其处理不当。

提交小的、渐进的更改

开发人员一定要牢记:更改必须是小的。因为等待引入更大批量的更改会延迟测试反馈,会更难以确定问题的根本原因。

良好的测试覆盖率

由于 CI / CD 的目的是减少手动测试,因此整个代码库应该有一个良好的自动化测试覆盖率,以确保软件按预期运行。此外,还应该定期清理冗余或过时的测试以避免影响流水线。


测试套件中不同类型测试的比例应和“测试金字塔”模型相似。大多数测试应该是单元测试,因为它们拥有基本功能的同时还可以快速执行。此外,还要有较少数量的集成测试,以确保组件可以一起成功运行。最后,应在测试周期结束时包含少量回归、UI、系统和端到端测试,以确保构建满足项目的所有行为要求。可以使用像 JaCoCo 这样的工具来确定测试套件涵盖了多少代码库。



图 4 测试金字塔

结语

CI/CD 的出现大大提高了开发团队的生产效率,缩短了开发周期。其敏捷、稳定、可靠的特性,也越来越被企业所青睐与需要。本文先介绍了系统构建的先决技术与实践,自动化构建、版本控制,并给出了 Java 环境下一些构建工具,然后分别介绍了持续集成(CI)、持续交付和持续部署(CD)的概念及其优势,并在最后给出了一些最佳实践,如确保部署一致、保证良好的测试覆盖率等。希望能帮助大家厘清 CI/CD 的特性及功能,同时也希望 CI/CD 的初学者能藉由本文得以入门。


2020-05-16 17:161294

评论

发布
暂无评论
发现更多内容

Nautilus Chain测试网迎阶段性里程碑,模块化区块链拉开新序幕

BlockChain先知

手势识别技术及其应用

来自四九城儿

加速44%!RT-DETR量化无损压缩优秀实战

飞桨PaddlePaddle

人工智能 百度 paddle

Nautilus Chain测试网迎阶段性里程碑,模块化区块链拉开新序幕

股市老人

建设数字工厂:生产物料齐套检查的实现方法

华为云开发者联盟

华为云 华为云开发者联盟 企业号 6 月 PK 榜

MegEngine 使用小技巧:如何做 MegCC 的模型性能评测

MegEngineBot

深度学习 开源 性能测试 编译器 MegEngine

深入理解Pod的核心知识

穿过生命散发芬芳

pod 6 月 优质更文活动

软件测试|抓包工具Charles--出现unknown怎么解决?

霍格沃兹测试开发学社

海纳 “千川”:得物多场景统一推荐平台

得物技术

OneCode-流程引擎设计

codebee

MySQL8新特性窗口函数详解

越长大越悲伤

MySQL sql

架构模块2作业

sandywrh

Seata Saga 模式快速入门和最佳实践

SOFAStack

分布式 云原生 开发 seata Seata框架

2023-06-14:我们从二叉树的根节点 root 开始进行深度优先搜索。 在遍历中的每个节点处,我们输出 D 条短划线(其中 D 是该节点的深度) 然后输出该节点的值。(如果节点的深度为 D,则其

福大大架构师每日一题

Go 算法 rust 福大大架构师每日一题

ubuntu服务器安装图形化界面总结

Studying_swz

6 月 优质更文活动

手势识别技术的挑战和未来发展

来自四九城儿

WMS 库存系统设计

红袖添香

系统设计 供应链物流 WMS系统 库存系统

智达方通EPM 发布5.0版本,持续赋能企业数智化管理

智达方通

EPM 智达方通 全面预算管理 智达方通EPM 企业绩效管理系统

用Optaplanner实现云资源优化:建模详解

PeterOne

算法 后端 运筹优化 6 月 优质更文活动

风口上的AIGC,技术岗动不动年薪百万,甚至重金难求?

引迈信息

人工智能 低代码 AIGC ChatGPT

当 GraphQL 遇上图数据库,便有了更方便查询数据的方式

NebulaGraph

图数据库 graphql

Spring Security6 全新写法,大变样!

江南一点雨

Java springboot springsecurity

GitHub 2800颗星,支持GPT/Transformer,字节跳动这个开源项目是怎么来的?

字节跳动技术范儿

机器学习 nlp

生产环境可用的 Seata-go 1.2.0 来啦!!!

SOFAStack

Java seata 版本发布 Seata框架 Seata-go

Web 富文本编辑器之 Android 输入兼容

PingCode

Web 富文本编辑器 Android 输入兼容

精打细算:OptaPlanner如何帮助您找到最佳优惠券组合

PeterOne

算法 运筹优化 6 月 优质更文活动

JS中, Set为什么是带键的集合?

林十二XII

前端

联盟送福利:云上掘金,开启你收入的第二增长曲线

华为云开发者联盟

云计算 华为云 华为云开发者联盟 企业号 6 月 PK 榜

一文吃透低代码平台的衍生历程、优势及未来趋势

这我可不懂

低代码 数字化 JNPF

C语言编程—命令行参数

二哈侠

C语言 命令行参数解析 6 月 优质更文活动

Generative AI 新世界:文本生成领域论文解读

亚马逊云科技 (Amazon Web Services)

机器学习

从0到1了解CI/CD:初学者入门必备_文化 & 方法_Rancher_InfoQ精选文章