大咖直播-鸿蒙原生开发与智能提效实战!>>> 了解详情
写点什么

Project Pravega ---- 支持 streaming 和实时分析的存储平台

  • 2019-09-03
  • 本文字数:708 字

    阅读完需:约 2 分钟

Project Pravega ----支持streaming和实时分析的存储平台

QCon上海2018大会上,滕昱讲师做了《Project Pravega ----支持 streaming 和实时分析的存储平台》主题演讲,主要内容如下。


演讲简介


Project Pravega 是 DELLEMC 设计并开源的用来支持实时流数据和分析的存储平台,支持存储无限的数据流并同时满足企业用户对数据持久性严格要求的产品。


Pravega 会作为 DELLEMC 给 IoT 产业提供的端到端解决方案中流存储的部分出现,另外在整个解决方案也包括流行的 stream processors, 例如 Apache Flink and Apache Spark,也包括 DELLEMC 已经发布的企业级分布式文件和对象存储平台。


Pravega 有如下特性:


  • 精确的一次性语义支持(Exactly Once schematic)

  • 业务自动伸缩支持(Auto scaling)

  • 分布式计算原语(Distributed Computing Primitive)

  • 高效的写性能(Write Efficiency)

  • 无限数据存储能力(Unlimited Retention)

  • 数据安全和持久性的支持(Durability)

  • 事务支持(Transaction Support)

听众受益

  • 了解 streaming 系统和实时分析平台的 use case 和现阶段的 solution/Architecture 的局限性

  • 了解 Project Pravega 是如何从架构上解决这些局限性

  • 分布式系统中 Exactly Once/ Transaction Support/ Auto scaling 是如何设计实现的


讲师介绍


滕昱


Dell EMC 软件开发总监


滕昱,目前就职于 DELL EMC 非结构化数据存储部门(Unstructured Data Storage) 团队并担任软件开发总监。2007 年加入 DELLEMC 以后一直专注于分布式企业云存储产品和 service 领域。先后参加并领导了中国研发团队参与两代 DELLEMC 对象存储产品的研发工作并取得商业上成功。


从 2016 年开始,兼任 Streaming 存储和实时分析系统的设计开发工作。












完整演讲 PPT 下载链接


https://qcon.infoq.cn/2018/shanghai/schedule


2019-09-03 15:102654

评论

发布
暂无评论
发现更多内容

克制文章长度

changyou

漫谈哲学与编程

keelii

编程 哲学

我为什么选择infoq写作平台

三爻

决定我们认知深度的究竟是什么?

石君

深度思考 方法论 连接

Java并发编程系列——线程

孙苏勇

Java 并发编程 线程

程序员陪娃漫画系列——修龙头

孙苏勇

程序员 生活 陪伴 漫画

Java并发编程系列插曲——对象的内存结构

孙苏勇

Java 内存模型 面向对象 ClassLayout

Golang 真的好用吗?

极客时间

编程语言 Go 语言

程序员都应该了解的运维知识经验

松花皮蛋me

DevOps 分布式 运维

敏捷开发 | 张三与需求管理

易成研发中心

敏捷开发 需求管理

如何阅读源码?

武培轩

Java 源码 面试 进阶 后端

加班能解决交付的期望么?

拖地先生

项目管理 领导力 管理 时间管理

很不幸,自动化测试永远只能是必要非充分条件

刘华Kenneth

DevOps 敏捷 自动化 测试 金字塔

知乎开发了一个搜索引擎

红泥

搜索引擎 百度 知乎

「超级右键」

非著名程序员

macos 程序员 效率工具 软件 Mac

基于Kubernetes的多云和混合云

倪朋飞

云计算 架构 Kubernetes 微服务 Service Mesh

在谈判中,你有哪些属于自己的独特的方法和技巧?

Yolanda

回"疫"录(3):让人怀念的普通一天

小天同学

疫情 回忆录 现实纪录 纪实

世界知识产权日碎碎念

Yin

成长 随笔 知识产权

最近的一些人生感悟

小智

人生 哲学

小论互联网项目管理

南方

项目管理 互联网 个人成长 碧海潮生曲

随手记备忘录的好习惯

changyou

程序员5分钟:你了解32位带符号的整型吗?

顾仲贤

程序员

程序员陪娃漫画系列——看医生

孙苏勇

程序员 生活 陪伴 漫画

别总说CMS、G1,该聊聊ZGC了

猿人谷

CMS G1 ZGC JVM

前端如何搞监控总结篇

大前端洞见

大前端 监控 全链路监控

除了负载均衡的算法,你还应该知道这些

松花皮蛋me

Java 负载均衡 分布式

程序员5分钟:你的程序占用了多少内存?

顾仲贤

程序员

爱他,就让他走?

Selina

团队管理 领导力 团队协作

聊聊苹果公司技术部门的宫斗和冷战

赵钰莹

程序员 外包 apple

微信朋友圈为什么没有阅读数?

彭宏豪95

微信 产品 产品设计

Project Pravega ----支持streaming和实时分析的存储平台_QCon_滕昱_InfoQ精选文章