写点什么

Concourse:可扩展的开源 CI 管道工具

  • 2016-05-05
  • 本文字数:1505 字

    阅读完需:约 5 分钟

Concourse 是一个开源的 CI 管道工具,它使用 yaml 文件对管道进行配置,以及设置无需配置的安装。Concourse 最近发布了第一个主要版本,目前已经可以下载1.1.0 版本。根据由 Pivotal 所赞助的团队所说,Concourse 的主要优点在于为管道提供明确的、第一级的支持;在容器中运行相互隔离的构建工作、可避免使用雪花型构建服务器、以及能够方便地访问构建日志等等。

Concourse 同时也表示,概念上的简单性是 Concourse 的另一个额外的优势:

Concourse 的最终目标是以尽可能少的独立变化部分提供一种具有表达性的系统。Concourse 设立了三种核心概念:任务、资源以及包含这两者的作业。

任务(Task)是执行的基本单元,表现为在一个全新启动的容器中所运行的脚本。容器已经经过了预处理,因此其中包含了一个输入与输出目录,任务脚本可在这些目录中运行。

资源(Resource)则表现为版本化资源的抽象位置,例如某个 repository。资源也可用于对进入或退出某个管道的外部依赖进行建模,或是表示更抽象的概念,例如时间触发器等等。资源的变更可被检测(检查)、获取(获得)以及发布(推送)。不同的资源类型(例如 Git、AWS S3 或触发器)可用于封装用于管道的各种样板代码,为 Concourse 的扩展提供了一个可适配的接口。

作业(Job)是由资源与任务构成的,通过构建计划实现。作业可由资源的变更所触发,也可以选择手动触发,以实现人工批准流程。下面的脚本展现了一个简单的作业:

复制代码
jobs:
- name: hello-world
plan:
- task: say-hello
config:
platform: linux
image_resource:
type: docker-image
source: {repository: ubuntu}
run:
path: echo
args: ["Hello, world!"]

一个作业计划的执行实例被称为一次构建(Build),Concourse 中的构建是可重复使用的,因为其中的任务在新的容器中也将重新运行。因此,构建的工作线程不会受到之前运行结果的变更所影响。此外,如果某次构建失败了,也可以通过一个名为 Fly 的 Concourse 命令行工具在某个容器中再一次在本地运行,通过这种方式实现更快的开发周期。此外,

通过使用 Fly 中的 Intercept 特性,运行在某个构建中的容器即使在运行期间(甚至是刚刚完成任务的短时间之内)也能够进行访问,这将极大地帮助用户进行调试。

管道就是通过作业实现的资源流变化的结果可视化展现。在一个部署过程中可定义多个管道,这些管道是相互隔离的。他们支持类似于 GoCD 方式的输入与输出,并且可在 yaml 文件中完成所有配置。

据 Concourse 团队所说,促使他们创建另一个 CI 工具的动力在于他们对现有的工具不太满意。举例来说, Jenkins 依赖于插件以及基于点击的配置,因此重建实例就是一个艰难的任务。而 GoCD 的问题在于“很难找到如何配置某些东西的信息,并且执行的层次结构很深又非常复杂。”

虽然 Concourse 可用于 CI 与 CD,但现有的资源缺乏某些更专注于部署的实现,因此持续交付与部署任务的实现就需要由用户来完成。此外,目前的仪表板提供的运维信息不够充分。不过,由于指标数据对于理解系统的表现与行为至关重要,因此“Concourse 可提供系统本身的健康状况指标,以及与正在运行的构建相关的各种指标。运维人员可以深入了解这些指标,以观察系统的健康状况。” Concourse 本身的管道指标都是公开暴露的。

Concourse 利用了 Pivotal 与 Cloud Foundry 中的某些术语和工具,例如通过Garden API 对于运行中的容器进行抽象,或是通过BOSH 实现发布的管理。因此,如果用户熟悉这些生态系统,对于Concourse 的上手将有所帮助。为了帮助用户克服新上手时在技能上的缺陷,可参考在线文档以及使用指南

查看英文原文 Concourse: Scalable Open Source CI Pipeline Tool

2016-05-05 19:004125
用户头像

发布了 428 篇内容, 共 200.5 次阅读, 收获喜欢 39 次。

关注

评论

发布
暂无评论
发现更多内容

什么是HTTP劫持,有什么方案能处理

德迅云安全杨德俊

完蛋!我把AI喂吐了!

有道技术团队

网易有道 AIGC Prompt QAnything

Qt项目第二弹-文件加解密之RSA

springIce

rsa qt openssl

关键词搜索拼多多商品列表数据接口Python

tbapi

拼多多API接口 关键词搜索拼多多API接口 拼多多商品列表数据接口

Pudgy Penguins NFT 概览与数据分析

Footprint Analytics

区块链游戏 NFT

用 Easysearch 帮助大型车企降本增效

极限实验室

索引 快照 降本增效 数据压缩 easysearch

华秋助力扬兴打破垄断,推动晶振国产化进程

华秋电子

晶振

K8s 集群可观测性-数据分流最佳实践

观测云

K8s 多集群管理

在线模型系统分布式异构计算演变-京东广告算法架构体系建设

京东零售技术

人工智能 机器学习 算法

商汤科技日日新SenseNova 4.0发布:这⼀次,带来全新的AI体验!

Lily

容器化对数据库的性能有影响吗?

小猿姐

数据库 Kubernetes 容器化

专有云 ABC Stack 联合银联商务打造金融级云平台,入选《2024 央国企上云用云典型案例》

Baidu AICLOUD

专有云 金融云

选300平米别墅还是90平米小平层?一文带你读懂PolarDB分布式版集分一体化

阿里云数据库开源

数据库 阿里云 分布式数据库 polarDB PolarDB-X

春节活动“龙”重登场,三大领域创意应用等你来挑战!

飞桨PaddlePaddle

百度 paddle 飞桨 应用开发 春节活动

喜报|博睿数据算力调度可观测平台荣获信通院“算力服务领航者计划”优秀案例

博睿数据

可观测性 运维监控

基于客户真实使用场景的云剪辑Timeline问题解答与代码实操

阿里云CloudImagine

云计算 视频云 云剪辑

【AIOps】日志分析领域难题:如何对混合日志进行自动化解析?

人工智能 软件开发 华为云

淘宝app端商品详情数据采集

tbapi

@工控工程师,往这儿看!80%工控兄弟都在种草的宝藏应用,你知道几条?

AIRIOT

想好新年去哪了吗?合合信息扫描全能王用AI“留住”年味

合合技术团队

文字识别 新年计划 图像处理 合合信息 扫描全能王

论文分享:利用对象存储进行高性能数据分析

Greptime 格睿科技

数据库 rust 对象存储 时序数据库

新增模型检验,指标自动评估模型效果|ModelWhale 版本更新

ModelWhale

人工智能 机器学习 大数据 数据分析 模型训练

投资更好的管理会计系统,探索全面预算管理的奥秘

智达方通

管理会计 全面预算管理

听懂一句AI实话,做成一件零售实事

脑极体

AI

河南省政务民生、本地生活、新闻等垂域应用启动鸿蒙原生应用开发

最新动态

Concourse:可扩展的开源CI管道工具_DevOps & 平台工程_Grischa Ekart_InfoQ精选文章