2天时间,聊今年最热的 Agent、上下文工程、AI 产品创新等话题。2025 年最后一场~ 了解详情
写点什么

你真了解实时大数据?高手们如何玩转开源流计算?

  • 2018-08-27
  • 本文字数:1488 字

    阅读完需:约 5 分钟

9 月,一场热闹非凡的技术盛宴——2018 实时大数据 Meetup 要来啦!

最近两年,实时大数据快速发展,流式 SQL、在线机器学习、流式大数据查询、SQL 复杂时间处理(CEP SQL)、时空数据分析(Time GeoSpatial)与处理等高大上特性迅速成长起来,并扎根于科技金融、车联网、物联网、电商、智慧城市等应用场景,创造新的价值。

毋庸置疑,数据越实时价值越大,毫秒~ 秒级的实时流式大数据计算场景层出不穷。并且当下,从数据产生到分析结果的计算,数据时效性对业务的蓬勃发展起到更至关重要的作用。在面向毫秒的实时大数据计算场景上,Spark 和 Flink 各有所长。

而针对当前大数据领域分析场景需求各异而导致的存储冗余问题,Apache CarbonData 则提供了一种新的融合数据存储方案,以一份数据同时支持快速过滤查找和各种大数据离线分析和实时分析。目前,CarbonData 已在 20+ 企业生产环境上部署应用。

因此,本次 Meetup 将深度解析大数据实时流计算两大引擎 Apache Spark(Structured Streaming) 、Apache Flink 和社区新贵 Apache CarbonData 技术与实践,并将融合实时的数据存储方案。这些来自于开源社区和一线企业的实践经验,将带给大家关于实时大数据技术的更多落地思考。

插入主视觉图

本次 Meetup 将开设为期一整天的演讲 + 动手实训活动,并集合了 Databricks、华为云及美团的大咖级嘉宾。他们的集体「授业解惑」一定能帮你更好地进阶 Spark、Flink 及 CarbonData 开发,用更开放的视角实操大数据实时流计算。

这场技术盛宴已开启限额免费报名通道!

上午场 Meetup 演讲嘉宾

本次 Meetup 汇聚了实时大数据领域优秀的工程师、分析师、代码贡献者及一线实践者。

这些嘉宾包括 Databricks 工程师及 Spark Structured Streaming 项目带头人 Tathagata Das、华为云相关专家、美团点评专家,他们长期活跃在 Apache 开源社区,并担任 PMC 和 Committer 关键技术角色。

其中,作为 Spark Structured Streaming 的主要开发人员,Tathagata Das 将从推动者的视角分享 Spark Structured Streaming 当前的一些进展,为工程师们基于其特性更好地开发提供成熟思路。其他三位业内大牛讲师,也将带来他们对 Spark、Flink 及 CarbonData 的技术观察和最佳实践分享。

演讲话题

  • Easy, Scalable, Fault-Tolerant Stream Processing with Structured Streaming in Apache Spark
  • What's New in Apache CarbonData 1.5
  • 美团点评 Flink 实践与应用
  • 智能流计算:Flink/Spark 在 CloudStream 中的应用实践

(点击「阅读原文」,查看所有演讲嘉宾及演讲议题摘要)

活动日程 & 报名方式

时间:9 月 8 日全天(上午场 Meetup+ 下午场 Workshop)

地点:北京·车库咖啡

长按上方二维码扫码,或点击文末阅读原文,一键直达报名窗口 :-)

敲黑板!此次活动将全!程!免!费!,报名人满即通道关闭,请尽快预约席位!

下午场 Workshop 预告

本次下午场 Workshop 将设置三大环节:

  • 第一环节DEMO 演示:基于 Spark+CarbonData 完成各种大数据分析(实时数据查询、多维过滤查询,多维统计分析等)。
  • 第二环节将由参加者基于指定命题,完成实时流计算分析典型场景实践;参与者还可以现场完成自己设计的实时计算作业。
  • 第三环节为自由讨论,相关专家将现场解答大家实际操作中的问题。

报名或咨询下午场 Workshop的伙伴们,请加本次活动小助手微信 ID:geekbang111(备注:meetup),获得报名链接及更多信息!

惊喜礼物

报名参会且到场的朋友们均可获得 2018 实时大数据 Meetup 限量版 T 恤一件,以及其他惊喜礼品。进一步参与下午场 Workshop 活动,还可以收集更多惊喜小礼物,保证满载而归!

2018-08-27 19:003340
用户头像
Cherry倩芸 InfoQ高级策划编辑

发布了 51 篇内容, 共 23.9 次阅读, 收获喜欢 34 次。

关注

评论

发布
暂无评论
发现更多内容

JavaScript 回调函数/Promise/ async/await

源字节1号

软件开发 前端开发 后端开发

java培训redis集群原理详解

@零度

redis java培训

直播电子商务应用程序开发需要什么基本功能?未来发展前景如何?

开源直播系统源码

软件开发 直播源码 带货直播

Vue3+ElementPlus+Axios实现从后端请求数据并渲染

Python研究所

6月月更

居家办公竟比去公司上班还累? | 社区征文

架构精进之路

初夏征文

Future & CompletionService

Ayue、

多线程 Future接口

面试突击60:什么情况会导致 MySQL 索引失效?

王磊

Java MySQL 面试

SpringBoot 3.0最低版本要求的JDK 17,这几个新特性不能不知道!

博文视点Broadview

政策关注 | 加快构建数据基础制度,维护国家数据安全

青藤云安全

数据治理 数据安全

maven编译遇到"编码GBK的不可映射字符"警告的处理

程序员欣宸

Java maven 6月月更

我大抵是卷上瘾了,横竖睡不着!竟让一个Bug,搞我两次!

小傅哥

小傅哥 异常 bug 连接池 面试问题

TDengine 邀请函:做用技术改变世界的超级英雄,成为 TD Hero

TDengine

数据库 tdengine

Elasticsearch 在地理信息空间索引的探索和演进

vivo互联网技术

elasticsearch 数据分析 数据检索

预约直播 | 主流视觉算法介绍及在PAI上的应用

阿里云大数据AI技术

机器学习 视觉算法

SpringCloud - Eureka核心源码解析

码农参上

微服务 SpringCloud Eureka 注册中心

红包雨: Redis 和 Lua 的奇妙邂逅

勇哥java实战分享

华为开启2022全球校园AI算法精英大赛 百万奖金等你来挑战算法极限

科技汇

Rxjs mergeMap 的使用场合

汪子熙

typescript 响应式编程 angular RXJS 6月月更

【值得收藏】Centos7 安装mysql完整操作命令

迷彩

MySQL 数据库 centos 6月月更

Salesforce 容器化 ISV 场景下的软件供应链安全落地实践

阿里巴巴中间件

阿里云 容器 云原生

优博讯出席OpenHarmony技术日,全新打造下一代安全支付终端

极客天地

前端食堂技术周刊第 42 期:Vue 2.7 Beta、TS 4.8 Beta、React 开源奖、ECMAScript 2022

童欧巴

JavaScript typescript Vue 前端 React

基于STM32设计的蓝牙健康管理设备

DS小龙哥

6月月更

Spring Boot零配置启动原理

码农参上

Spring Cloud springboot

在外企远程办公是什么体验? | 社区征文

Geek_rze78a

Java 程序员 远程办公 外企 初夏征文

EMQ携手谐云,打造车联网平台联合解决方案

EMQ映云科技

车联网 物联网 IoT 兼容性测试 6月月更

Drive to APasS!使用明道云管理F1赛事

明道云

centos7防火墙完整操作命令,值得的收藏

迷彩

Linux 运维 Centos 7 防火墙 6月月更

大数据培训Scala 类和对象知识与案例分享

@零度

scala 大数据

web前端培训组件内部数据state的知识点分享

@零度

前端开发 state

秒云荣获《2022爱分析 · IT运维厂商全景报告》智能运维AIOps市场代表厂商

MIAOYUN

云原生 智能运维 IT运维 智能运维AIOps

你真了解实时大数据?高手们如何玩转开源流计算?_大数据_Cherry倩芸_InfoQ精选文章