【AICon】AI 基础设施、LLM运维、大模型训练与推理,一场会议,全方位涵盖! >>> 了解详情
写点什么

Apache SeaTunnel(Incubating)2.1.0 发布,内核重构、全面支持 Flink

  • 2022-03-21
  • 本文字数:1493 字

    阅读完需:约 5 分钟

Apache SeaTunnel(Incubating)2.1.0 发布,内核重构、全面支持Flink

2021 年 12 月 9 日,SeaTunnel 进入 Apache 孵化器。4 个月后的 2022 年 3 月 18 日,其首个 Apache 版本正式发布,并且保证了首个版本一次性通过检查。这意味着 2.1.0 版本,是经过 SeaTunnel 社区和 Apache 孵化器投票检查发布的官方版本,企业和个人用户可以放心安全使用。


备注:软件许可协议是一种具有法律性质的合同或指导,目的在于规范受著作权保护的软件的使用或散布行为。通常的许可方式会允许用户来使用单一或多份该软件的复制,因为若无许可而径予使用该软件,将违反著作权法给予该软件开发者的专属保护。效用上来说,软件许可是软件开发者与其用户之间的一份合约,用来保证在符合许可范围的情况下,用户将不会受到控告。


进入孵化器前后,我们花费了大量的时间来梳理整个项目的外部依赖以确保整个项目的合规性。需要说明的是,开源软件选择怎样的 License 并不意外着项目本身就一定合规。而 ASF 严苛的版本检查最大程度地保证了软件 License 的合规性,以及软件合理合法的流通分发。

本次发布版本说明

新特性

1.对微内核插件化的架构内核部分进行了大量优化,内核以 Java 为主,并对命令行参数解析,插件加载等做了大量改进,同时插件扩展可根据用户(或贡献者)所擅长的语言去做开发,极大程度地降低了插件开发门槛。


2.全面支持 Flink,但同时用户也可自由选择底层引擎,本次更新也为大家带来了大量的 Flink 插件,也欢迎大家后续贡献相关插件。


3.提供本地开发极速启动环境支持(example),贡献者或用户可以在不更改任何代码的情况下快速丝滑启动,方便本地快速开发调试体验。对于需要自定义插件的贡献者或者用户来讲,这无疑是个令人激动的好消息。事实上,我们在发布前的测试中,也有大量贡献者采用这种方式快速对插件进行测试。


4.提供 Docker 容器安装,用户可以极快地通过 Docker 部署安装使用 SeaTunnel,未来我们也会围绕 Docker&K8s 做出大量迭代,欢迎大家讨论交流。

具体功能说明

  • 使用 JCommander 来做命令行参数解析,使得开发者更关注逻辑本身。

  • Flink 从 1.9 升级至 1.13.5,保持兼容旧版本,同时为后续 CDC 做好铺垫。

  • 支持 Doris 、Hudi、Phoenix、Druid 等 Connector 插件,完整的插件支持你可以在这里找到 [plugins-supported-by-seatunnel] 。

  • 本地开发极速启动环境支持,你可以在使用 example 模块,不修改任何代码的前提下快速启动,方便开发者本地调试体验。

  • 支持通过 Docker 容器安装和试用 SeaTunnel。

  • Sql 组件支持 SET 语句,支持配置变量。

  • Config 模块重构,减少贡献者理解成本,同时保证项目的代码合规(License)。

  • 项目结构重新调整,以适应新的 Roadmap。

  • CI&CD 的支持,代码质量自动化管控,(后续会有更多的计划来支持 CI&CD 开发)。

未来几个版本的规划

CDC 的支持;监控体系的支持;UI 系统的支持;更多的 Connector 支持,以及更高效的 Sink 支持,如 ClickHouse,很快会在下个版本跟大家见面。


后续 Feature 是由社区共同决定的,Apache SeaTunnel(Incubating) 呼吁大家一同参与社区后续建设。


【PPMC 感言】

Apache SeaTunnel(Incubating)PPMC LiFeng Nie 在谈及首个 Apache 版本发布的时候说,从进入 Apache Incubator 的第一天,我们就一直在努力学习 Apache Way 以及各种 Apache 政策,第一个版本发布的过程花费了大量的时间(主要是合规性),但我们认为这种时间是值得花费的,这也是我们选择进入 Apache 的一个很重要的原因,我们需要让用户用得放心,而 Apache 无疑是最佳选择,其 License 近乎苛刻的检查会让用户尽可能地避免相关的合规性问题,保证软件合理合法的流通。另外,其践行 Apache Way,例如公益使命、实用主义、社区胜于代码、公开透明与共识决策、任人唯贤等,可以帮助 SeaTunnel 社区更加开放、透明,向多元化方向发展。

2022-03-21 09:002623

评论

发布
暂无评论
发现更多内容

c++bind函数使用

良知犹存

c++

Docker架构

混沌畅想

Docker 容器 Docker架构

大明湖畔昇腾绽放,趵突泉里智能奔涌

脑极体

一致性 hash

garlic

极客大学架构师训练营

架构作业:一致性hash

Nick~毓

服了,这款开源类库可以帮你简化每一行代码

沉默王二

Java GitHub 后端 hutool

听说你会缓存?

架构师修行之路

redis 缓存 微服务

如果只推荐一本 Python 书,我要 Pick 它!

Python猫

Python 学习 编程 程序员 码农

C/C++最佳实践

jiangling500

c c++ 最佳实践

week04 作业

xxx

一文读懂线程池的工作原理(故事白话文)

捡田螺的小男孩

Java 面试 线程池 线程池工作原理

Java中的5大队列,你知道几个?

王磊

Java

架构师训练营第2期 第1周 作业一:食堂就餐卡系统设计

老腊肉

架构师训练营第2期 第1周 作业二:学习总结.md

老腊肉

epoll服务器解析

菜鸟小sailor 🐕

编码之路,与君共勉

yes

程序人生

一文搞懂ReactNative生命周期的进化

凌宇之蓝

react.js 面试 大前端 React Native

甲方日常 36

句子

工作 随笔杂谈 日常

java安全编码指南之:线程安全规则

程序那些事

java安全编码 java安全 java安全编码指南 java代码规范 java代码安全

6小时搞定云原生:从基础概念到上手实践

京东科技开发者

云原生

【得物技术】谈谈缓存的一二三四五

得物技术

缓存 架构 技术 缓存穿透 缓存击穿

设计数据库集群读写分离并非易事

架构师修行之路

分布式 微服务

Week 4命题作业

balsamspear

极客大学架构师训练营

分布式缓存架构,消息队列,负载均衡

garlic

极客大学架构师训练营

一份超级完整实用的PyCharm图解教程,8K字赶紧收藏起来

计算机与AI

Python IDLE 开发环境

week04总结

xxx

Linux内核系统结构

Linux 操作系统 内核 系统调用 操作系统结构

spring-boot-route(二十三)开发微信公众号

Java旅途

Java Spring Boot

二十一、深入Python强大的装饰器

刘润森

Python

Week 4学习总结

balsamspear

极客大学架构师训练营

Scikit-Learn中的特征排名与递归特征消除

计算机与AI

学习 数据科学 特征选择 降维 scikit-learn

Apache SeaTunnel(Incubating)2.1.0 发布,内核重构、全面支持Flink_开源_Apache SeaTunnel_InfoQ精选文章