AICon 上海站|90%日程已就绪,解锁Al未来! 了解详情
写点什么

网易开源的分布式存储系统 Curve 正式成为 CNCF 沙箱项目

  • 2022-06-15
  • 本文字数:1779 字

    阅读完需:约 6 分钟

网易开源的分布式存储系统 Curve 正式成为 CNCF 沙箱项目

2022 年 6 月 15 日,云原生计算基金会 (CNCF) 宣布,分布式存储系统 Curve 被正式接纳为 CNCF 沙箱(Sandbox)项目。Curve 由网易开源,是一款高性能、易运维、云原生的分布式存储系统,可应用于主流的云原生基础设施平台:对接 OpenStack 平台为云主机提供高性能块存储服务;对接 Kubernetes 为其提供 RWO、RWX 等类型的持久化存储卷;对接 PolarFS 作为云原生数据库的高性能存储底座,完美支持云原生数据库的存算分离架构。Curve 亦可作为云存储中间件使用 S3 兼容的对象存储作为数据存储引擎,为公有云用户提供高性价比的共享文件存储。


项目地址:https://github.com/opencurve/curve



Curve 进入 CNCF 沙箱,意味着全球顶级开源基金会对网易云原生存储技术演进的认可,也验证了网易在数字化基础软件领域的深厚积累,及对未来技术趋势的深刻洞察。通过进入 CNCF 沙箱,Curve 社区将更多吸引更多开发者和用户参与共建,进一步推动项目在云原生业务场景的成熟应用,从而深化云原生技术落地实践。

Curve 项目特色


Curve 的研发萌芽于开源 Ceph 存储系统难以满足网易业务发展的朴素需求,成长于云原生在各业务快速落地的契机。回顾 2018 年,网易已完成电商业务全面容器化,开始采用 Kubernetes + Operator 运行有状态应用,云原生存储基础设施的完善也被提上日程。


即便从当前 CNCF Landscape 来看,云原生存储项目依然远不及计算侧和网络侧丰富,开源项目更是稀缺(图中白底部分),如果再加上稳定、高性能、公有云私有云均可使用的灵活弹性、简单易运维这些云原生场景下对存储系统的基础要求,则市面上基本没有合适的系统可供选择。这是 Curve 得以健康发展的外在驱动力。



得益于 Raft 一致性协议及创新架构的技术路线,目前,无论采用 SATA SSD 块存储,还是 NVMe 块存储,Curve 的随机读写、延迟性能都远优于老牌开源存储系统 Ceph,异常状态下的性能稳定性同样有接近一倍半关系的领先程度。



和另外一个 CNCF 沙箱项目, 使用 Go 语言编写的基于容器的块存储开源软件 OpenEBS 相比,Curve 同时覆盖块存储和文件存储,更有利于建设统一的数字化基础软件,运维管理成本要求也更低。

Curve 使用场景


Curve 可以应用于各类云原生基础设施平台作为存储底座,如:

  • 对接 OpenStack 平台为云主机提供高性能块存储服务;

  • 对接 Kubernetes 为其提供 RWO、RWX 等类型的持久化存储卷;

  • 作为云存储中间件使用 S3 兼容的对象存储作为数据存储引擎,为公有云用户提供高性价比的共享文件存储;

  • 对接 PolarFS 作为云原生数据库的高性能存储底座,完美支持云原生数据库的存算分离架构。


针对当前国内数字化基础设施自主可控的需求,Curve 也做了诸多针对性的适配工作,目前,Curve 完全支持国产鲲鹏 CPU + 麒麟系统,软件架构能充分利用并发挥国产 CPU 和硬件以及操作系统的性能。此外,Curve 系统本身核心模块和数据结构以及数据通讯协议系国内自主设计与开发,自主研发代码 20 多万行,测试代码的覆盖率也达到 80%。

Curve 社区进展


Curve 于 2020 年正式开源,至今一年多的时间里发布 3 个大版本,完成了超过 2500 个 commits 提交,GitHub 上 Star 数超过 1100 个,除网易内部用户,网易云音乐、网易严选、网易有道、网易传媒、网易灵犀、网易云信等,还吸引了等超聚变技术有限公司、思谋科技、创云融达等十多家企业使用。


2022 年 3 月 ,Curve 凭借优异的性能和强大的易运维性,成为阿里云 PolarDB 社区的官方生态合作伙伴,为基于 Shared-Storage 架构的 PolarDB for PostgreSQL 提供分布式共享存储底座,支持数据库负载获得云原生快速弹性扩展的好处。

Curve 未来规划


未来 Curve 将瞄准高性能、易运维、云原生的目标持续演进:

  • 高性能:为云原生数据库、云中间件提供超高性能、超低时延的存储底座,助力存算分离架构落地。同时也可为文件存储提供热数据的高性能存储层,助力高性价比架构落地。

  • 云原生:支持各类云原生应用的存算分离架构,支持部署到私有云、公有云、混合云环境,为云原生应用提供更灵活便捷的存储系统。

  • 易运维:提供更简单、更易用、易排障的运维工具和诊断平台。


致谢


Curve 项目的发展离不开每一位社区参与者的付出。在此真诚地感谢每一位社区贡献者及用户的信任、支持和帮助,也特别感谢 CNCF 同仁尤其是 Storage TAG 对项目发展的指导和支持。欢迎更多开发者和用户参与 Curve 社区建设,如有任何意见和建议,皆可给项目提交 issue。

2022-06-15 20:055217
用户头像
蔡芳芳 InfoQ主编

发布了 804 篇内容, 共 578.8 次阅读, 收获喜欢 2802 次。

关注

评论 1 条评论

发布
用户头像
但为什么比 ceph 性能高的原因呢?

2022-06-20 10:34
回复
没有更多了
发现更多内容

深度解析:基于离线开发的数据仓库转型落地案例

袋鼠云数栈

辛巴不能没“敌人”,快手不能没“流量”

趣解商业

网红 直播 辛巴 三只羊

新一代客户数字化运营平台,助力品牌企业推进客户成功!

赛博威科技

快消行业 赛博威 数字化营销

天润融通创新服务模式,助力连锁加盟品牌突破沟通瓶颈

天润融通

天润融通解开售后维修的成本枷锁,提高维修服务效率

天润融通

linux安装docker

六哥是全栈

Linux 容器 教程 #docker

草料二维码功能上新!可以跨分区移动或复制内容了!

草料二维码

二维码 无代码 低代码平台 无代码平台 草料二维码

依然并始终相信RPA开发者的力量

八爪鱼采集器︱RPA机器人

TDBC回顾 | 钛铂数据肖贝贝:TapData — 自主可控

tapdata

Tapdata 实时数据平台 TapDB 国产分布式文档数据库

数据资产入表元年,企业如何抓住数据资产增值的机遇?

袋鼠云数栈

LeetCode题解:2341. 数组能形成多少数对,哈希表,详细注释

Lee Chen

艺术与科技共鸣,TCLArt艺术电视品鉴会暨公益音乐季

Lily

​介绍一款Java开发的商业开源MES系统

万界星空科技

开源 mes #开源 开源mes mes源码

英特尔:最新节点上的产品设计和工艺准备进展顺利,已具备更早地过渡到Intel 18A的能力

E科讯

数智化转型,JNPF如何成为企业的加速器

不在线第一只蜗牛

低代码 企业转型 数智化

面试官:limit 100w,10为什么慢?如何优化?

王磊

天润融通大模型重塑客户服务,挖掘企业增长新空间

天润融通

LeetCode题解:1237. 找出给定方程的正整数解,枚举,详细注释

Lee Chen

倒计时7天!CCS2024大模型安全与产业应用创新研讨活动诚邀你来

百度安全

前端黑科技:使用 JavaScript 实现网页扫码功能

不在线第一只蜗牛

JavaScript 前端

Python 利用百度联想词 API 提升搜索建议功能

幂简集成

Python API

喜报 | 新突破!望繁信科技荣获2023上海市“专精特新”企业认证

望繁信科技

数字化转型 流程挖掘 专精特新企业 流程资产 流程智能

网易开源的分布式存储系统 Curve 正式成为 CNCF 沙箱项目_语言 & 开发_蔡芳芳_InfoQ精选文章