50万奖金+官方证书,深圳国际金融科技大赛正式启动,点击报名 了解详情
写点什么

Project Pravega ---- 支持 streaming 和实时分析的存储平台

  • 2019-09-03
  • 本文字数:708 字

    阅读完需:约 2 分钟

Project Pravega ----支持streaming和实时分析的存储平台

QCon上海2018大会上,滕昱讲师做了《Project Pravega ----支持 streaming 和实时分析的存储平台》主题演讲,主要内容如下。


演讲简介


Project Pravega 是 DELLEMC 设计并开源的用来支持实时流数据和分析的存储平台,支持存储无限的数据流并同时满足企业用户对数据持久性严格要求的产品。


Pravega 会作为 DELLEMC 给 IoT 产业提供的端到端解决方案中流存储的部分出现,另外在整个解决方案也包括流行的 stream processors, 例如 Apache Flink and Apache Spark,也包括 DELLEMC 已经发布的企业级分布式文件和对象存储平台。


Pravega 有如下特性:


  • 精确的一次性语义支持(Exactly Once schematic)

  • 业务自动伸缩支持(Auto scaling)

  • 分布式计算原语(Distributed Computing Primitive)

  • 高效的写性能(Write Efficiency)

  • 无限数据存储能力(Unlimited Retention)

  • 数据安全和持久性的支持(Durability)

  • 事务支持(Transaction Support)

听众受益

  • 了解 streaming 系统和实时分析平台的 use case 和现阶段的 solution/Architecture 的局限性

  • 了解 Project Pravega 是如何从架构上解决这些局限性

  • 分布式系统中 Exactly Once/ Transaction Support/ Auto scaling 是如何设计实现的


讲师介绍


滕昱


Dell EMC 软件开发总监


滕昱,目前就职于 DELL EMC 非结构化数据存储部门(Unstructured Data Storage) 团队并担任软件开发总监。2007 年加入 DELLEMC 以后一直专注于分布式企业云存储产品和 service 领域。先后参加并领导了中国研发团队参与两代 DELLEMC 对象存储产品的研发工作并取得商业上成功。


从 2016 年开始,兼任 Streaming 存储和实时分析系统的设计开发工作。












完整演讲 PPT 下载链接


https://qcon.infoq.cn/2018/shanghai/schedule


2019-09-03 15:102650

评论

发布
暂无评论
发现更多内容

前端刷完这12道滑动窗口,就可以出山面试了

js2030code

JavaScript LeetCode

十五年,始吾心

博睿数据

可观测性 智能运维 博睿数据 15周年 品牌历史

Airserver2023免费手机投屏电脑工具

茶色酒

AirServer2023

OpenMLDB SQL 与标准 SQL 的主要差异

第四范式开发者社区

人工智能 机器学习 数据库 开源 特征

PCB板漏孔、漏槽怎么办?看工程师避坑“SOP”

华秋PCB

PCB 电路板 PCB设计 钻孔

软件测试 | 简历中应该如何描述才能体现出软技能的实力?

测吧(北京)科技有限公司

测试

解决方案| anyRTC 融合其他厂商视频会议系统方案

anyRTC开发者

音视频 私有云 视频会议 视频通话 H.323

软件测试| 普罗米修斯 - 基本使用

测吧(北京)科技有限公司

测试

足不出户,搞定IoT设备故障诊断和恢复——实践类

阿里云AIoT

阿里云 物联网 IoT

ONES 获得 SOC2 Type1 鉴证报告,数据安全能力受权威认可

万事ONES

江苏鸿程大数据:基于鲲鹏DevKit开发数据报告生成平台,数据库查询效率提升30%

极客天地

ChatGPT“爆红”启示:工业AI如何掀起新型“工业革命”?

Openlab_cosmoplat

人工智能 开源 工业 智能制造 ChatGPT

软件测试 | 普罗米修斯 - HTTP API调用PromQL

测吧(北京)科技有限公司

测试

安卓手机的网络权限,全网最全解答

神锁离线版

android 互联网 安卓 网络权限 安卓权限

存量设备 0 改造,平滑迁移阿里云 IoT 物联网平台最佳实践——实践类

阿里云AIoT

阿里云 物联网 IoT

软件测试 | 普罗米修斯 - 自定义exporter

测吧(北京)科技有限公司

测试

Exposure2023绿色版本人像滤镜插件下载

茶色酒

Exposure2023

API+DevOps:华为云API Arts一体化平台,端到端呵护您的API

科技怪授

API 华为云

软件测试 | HTTPS 的通信加解密过程,证书为什么更安全?

测吧(北京)科技有限公司

测试

软件测试 | 跨平台设备管理方案Selenium Grid

测吧(北京)科技有限公司

测试

mysongbook2023吉他谱永久免费版

茶色酒

mysongbook2023

Camtasia 2023体验版有哪些新功能

茶色酒

Camtasia Studio2023

AntDB数据库首个社区版正式发布,携手生态更多可能

亚信AntDB数据库

AntDB 国产数据库 AntDB数据库 企业号 3 月 PK 榜

小程序与微服务架构如何进行结合

Onegun

小程序 微服务架构 移动开发

FlagOpen大模型技术开源体系,开启大模型时代“新Linux”生态

硬科技星球

猫咪在逐步壮大--PUSS通证深度解析

股市老人

OpenMLDB 社区月报 | 2023 年 2 月

第四范式开发者社区

人工智能 机器学习 数据库 开源 特征

Project Pravega ----支持streaming和实时分析的存储平台_QCon_滕昱_InfoQ精选文章