写点什么

你真了解实时大数据?高手们如何玩转开源流计算?

  • 2018-08-27
  • 本文字数:1488 字

    阅读完需:约 5 分钟

9 月,一场热闹非凡的技术盛宴——2018 实时大数据 Meetup 要来啦!

最近两年,实时大数据快速发展,流式 SQL、在线机器学习、流式大数据查询、SQL 复杂时间处理(CEP SQL)、时空数据分析(Time GeoSpatial)与处理等高大上特性迅速成长起来,并扎根于科技金融、车联网、物联网、电商、智慧城市等应用场景,创造新的价值。

毋庸置疑,数据越实时价值越大,毫秒~ 秒级的实时流式大数据计算场景层出不穷。并且当下,从数据产生到分析结果的计算,数据时效性对业务的蓬勃发展起到更至关重要的作用。在面向毫秒的实时大数据计算场景上,Spark 和 Flink 各有所长。

而针对当前大数据领域分析场景需求各异而导致的存储冗余问题,Apache CarbonData 则提供了一种新的融合数据存储方案,以一份数据同时支持快速过滤查找和各种大数据离线分析和实时分析。目前,CarbonData 已在 20+ 企业生产环境上部署应用。

因此,本次 Meetup 将深度解析大数据实时流计算两大引擎 Apache Spark(Structured Streaming) 、Apache Flink 和社区新贵 Apache CarbonData 技术与实践,并将融合实时的数据存储方案。这些来自于开源社区和一线企业的实践经验,将带给大家关于实时大数据技术的更多落地思考。

插入主视觉图

本次 Meetup 将开设为期一整天的演讲 + 动手实训活动,并集合了 Databricks、华为云及美团的大咖级嘉宾。他们的集体「授业解惑」一定能帮你更好地进阶 Spark、Flink 及 CarbonData 开发,用更开放的视角实操大数据实时流计算。

这场技术盛宴已开启限额免费报名通道!

上午场 Meetup 演讲嘉宾

本次 Meetup 汇聚了实时大数据领域优秀的工程师、分析师、代码贡献者及一线实践者。

这些嘉宾包括 Databricks 工程师及 Spark Structured Streaming 项目带头人 Tathagata Das、华为云相关专家、美团点评专家,他们长期活跃在 Apache 开源社区,并担任 PMC 和 Committer 关键技术角色。

其中,作为 Spark Structured Streaming 的主要开发人员,Tathagata Das 将从推动者的视角分享 Spark Structured Streaming 当前的一些进展,为工程师们基于其特性更好地开发提供成熟思路。其他三位业内大牛讲师,也将带来他们对 Spark、Flink 及 CarbonData 的技术观察和最佳实践分享。

演讲话题

  • Easy, Scalable, Fault-Tolerant Stream Processing with Structured Streaming in Apache Spark
  • What's New in Apache CarbonData 1.5
  • 美团点评 Flink 实践与应用
  • 智能流计算:Flink/Spark 在 CloudStream 中的应用实践

(点击「阅读原文」,查看所有演讲嘉宾及演讲议题摘要)

活动日程 & 报名方式

时间:9 月 8 日全天(上午场 Meetup+ 下午场 Workshop)

地点:北京·车库咖啡

长按上方二维码扫码,或点击文末阅读原文,一键直达报名窗口 :-)

敲黑板!此次活动将全!程!免!费!,报名人满即通道关闭,请尽快预约席位!

下午场 Workshop 预告

本次下午场 Workshop 将设置三大环节:

  • 第一环节DEMO 演示:基于 Spark+CarbonData 完成各种大数据分析(实时数据查询、多维过滤查询,多维统计分析等)。
  • 第二环节将由参加者基于指定命题,完成实时流计算分析典型场景实践;参与者还可以现场完成自己设计的实时计算作业。
  • 第三环节为自由讨论,相关专家将现场解答大家实际操作中的问题。

报名或咨询下午场 Workshop的伙伴们,请加本次活动小助手微信 ID:geekbang111(备注:meetup),获得报名链接及更多信息!

惊喜礼物

报名参会且到场的朋友们均可获得 2018 实时大数据 Meetup 限量版 T 恤一件,以及其他惊喜礼品。进一步参与下午场 Workshop 活动,还可以收集更多惊喜小礼物,保证满载而归!

2018-08-27 19:003400
用户头像
Cherry倩芸 InfoQ高级策划编辑

发布了 51 篇内容, 共 24.2 次阅读, 收获喜欢 34 次。

关注

评论

发布
暂无评论
发现更多内容

易观千帆 | 2022年12月银行APP月活跃用户规模盘点

易观分析

金融 手机银行 用户

组合多个动画效果 —— Flutter 交错动画(Staggered Animation)简介

岛上码农

flutter ios 前端 动画 安卓开发

架构训练营模块五作业

张Dave

基于Spring Cache实现Caffeine、jimDB多级缓存实战

京东科技开发者

spring 缓存 接口 系统 企业号 1 月 PK 榜

技术管理者如何发掘写代码之外的能力?

石云升

极客时间 1月月更 技术领导力实战笔记

架构实战营模块四作业

西山薄凉

「架构实战营」

架构实战营4.6 千万学生管理系统存储设计

西山薄凉

「架构实战营」

Java高手速成 | JSP MVC模式项目案例

TiAmo

mvc java; jsp

在spring boot3中使用native image

程序那些事

spring 程序那些事 spring boot3

架构实战营4.5 常见存储系统随堂练习

西山薄凉

「架构实战营」

基于 SLO 告警(Part 1):基础概念

Grafana 爱好者

可观测性 SRE SLO

C++实现惰性求值

SkyFire

c++ 函数式编程 模板元编程

委派模式——从SLF4J说起

vivo互联网技术

Java slf4j 委派模式

电商秒杀系统架构设计

π

架构实战营

真相了!TCP连接原来是这么被墙干掉的!

程序员小毕

程序员 后端 网络协议 架构师 tcpip

镜像拉取节省 90% 以上,快手基于 Dragonfly 的超大规模分发实践

OpenAnolis小助手

开源 架构 快手 龙蜥技术 容器云平台

佛萨奇2.0上链DApp开发|佛萨奇链上开发技术

薇電13242772558

dapp

镭速-跨国车企数据高速、安全跨境传输解决方案

镭速

性能提升 40 倍!我们用 Rust 重写了自己的项目

Peefy

rust 编程语言 #go Python.

Verilog HDL行为级建模

timerring

FPGA

Tokio 中 hang 死所有 worker 的方法

Databend

软件测试/测试开发 | Appium 用例录制

测试人

软件测试 自动化测试 测试开发 测试用例 appium

接口测试这件小事

石臻臻的杂货铺

接口测试

SimMIM:更简单的掩码图像建模

Zilliz

Gartner:流程挖掘市场发展空间巨大,2022年预计市场规模将超10亿美元

九科Ninetech

云原生数据交付平台Kuda在AI场景下的模型分发实践

Geek_c4ea78

机器学习 开源 Kubernetes 容器 云原生

使用启科QuPot+Runtime+QuSaaS进行量子应用开发及部署-调用AWS Braket计算后端

启科量子开发者官方号

量子计算 Amazon Braket

5 个 JavaScript 代码优化技巧

devpoint

JavaScript 前端开发 JS代码优化 扩展运算符

你真了解实时大数据?高手们如何玩转开源流计算?_大数据_Cherry倩芸_InfoQ精选文章