写点什么

Project Pravega ---- 支持 streaming 和实时分析的存储平台

  • 2019-09-03
  • 本文字数:708 字

    阅读完需:约 2 分钟

Project Pravega ----支持streaming和实时分析的存储平台

QCon上海2018大会上,滕昱讲师做了《Project Pravega ----支持 streaming 和实时分析的存储平台》主题演讲,主要内容如下。


演讲简介


Project Pravega 是 DELLEMC 设计并开源的用来支持实时流数据和分析的存储平台,支持存储无限的数据流并同时满足企业用户对数据持久性严格要求的产品。


Pravega 会作为 DELLEMC 给 IoT 产业提供的端到端解决方案中流存储的部分出现,另外在整个解决方案也包括流行的 stream processors, 例如 Apache Flink and Apache Spark,也包括 DELLEMC 已经发布的企业级分布式文件和对象存储平台。


Pravega 有如下特性:


  • 精确的一次性语义支持(Exactly Once schematic)

  • 业务自动伸缩支持(Auto scaling)

  • 分布式计算原语(Distributed Computing Primitive)

  • 高效的写性能(Write Efficiency)

  • 无限数据存储能力(Unlimited Retention)

  • 数据安全和持久性的支持(Durability)

  • 事务支持(Transaction Support)

听众受益

  • 了解 streaming 系统和实时分析平台的 use case 和现阶段的 solution/Architecture 的局限性

  • 了解 Project Pravega 是如何从架构上解决这些局限性

  • 分布式系统中 Exactly Once/ Transaction Support/ Auto scaling 是如何设计实现的


讲师介绍


滕昱


Dell EMC 软件开发总监


滕昱,目前就职于 DELL EMC 非结构化数据存储部门(Unstructured Data Storage) 团队并担任软件开发总监。2007 年加入 DELLEMC 以后一直专注于分布式企业云存储产品和 service 领域。先后参加并领导了中国研发团队参与两代 DELLEMC 对象存储产品的研发工作并取得商业上成功。


从 2016 年开始,兼任 Streaming 存储和实时分析系统的设计开发工作。












完整演讲 PPT 下载链接


https://qcon.infoq.cn/2018/shanghai/schedule


2019-09-03 15:102682

评论

发布
暂无评论
发现更多内容

java安全编码指南之:敏感类的拷贝

程序那些事

Java java安全编码 java安全 java安全编码指南

《我在你床下》观后感

徐说科技

在多架构时代,英特尔扩展高性能计算边界

E科讯

阿里P8大牛力荐Java程序员进阶必读的书籍清单(附电子版)

Java架构之路

Java 程序员 面试 编程语言 书籍推荐

《转》POI的XWPFParagraph.getRuns分段问题

hasWhere

Redis 缓存性能实践及总结

vivo互联网技术

redis redis集群 redis监控

架构师训练营第 1 期 第 2 周作业

李循律

极客大学架构师训练营

如何避免option请求

hasWhere

《转》Spring事务传播机制

hasWhere

公有云厂商哪家强?本月UCloud、百度云、阿里云位居三甲——2020年8月云主机性能评测排名

博睿数据

格式化报文输出

hasWhere

form表单提交get请求

hasWhere

写给新人算法工程师

峰池

互联网 新人 推荐算法 算法工程师

学习思路

hasWhere

基于数组的有界阻塞队列 —— ArrayBlockingQueue

程序员小航

Java 源码 队列 源码阅读 JUC

LeetCode题解:641. 设计循环双端队列,使用队列,JavaScript,详细注释

Lee Chen

大前端 LeetCode

Java进阶教程、大厂面试真题、项目实战,GitHub上这14个开源项目屌炸天了!

Java架构之路

Java 程序员 面试 编程语言 项目实战

清华架构师整理分布式系统文档:从实现原理到系统实现,收藏吧

小Q

Java 程序员 架构 分布式 微服务

Http自定义请求头接收不正确

hasWhere

栈与队列简介

Java旅途

数据结构 队列

数据提交

hasWhere

ARChatRoom功能介绍手册

anyRTC开发者

音视频 WebRTC 语音 RTC 安卓

解读华为云原生数据库设计原则,打破传统数据库上云瓶颈

华为云开发者联盟

数据库 数据

c++ 杂谈3

菜鸟小sailor 🐕

一文了解Zookeeper

Java旅途

kafka zookeeper 分布式

CICD实战——服务自动构建与部署

TARS基金会

DevOps 后端 jenkins CI/CD TARS

onblur调用alert导致的死循环

hasWhere

学习路线

hasWhere

鸿蒙系统究竟是PPT秀还是有真材实料?鸿蒙HarmonyOS开发环境搭建与运行Demo

软测小生

华为 鸿蒙 HarmonyOS

实践案例丨利用小熊派开发板获取土壤湿度传感器的ADC值

华为云开发者联盟

物联网 IoT 传感

揭秘App的财富密码,剖析算法工程师价值来源

峰池

人工智能 互联网 推荐算法 互联网公司

Project Pravega ----支持streaming和实时分析的存储平台_QCon_滕昱_InfoQ精选文章