写点什么

你真了解实时大数据?高手们如何玩转开源流计算?

  • 2018-08-27
  • 本文字数:1488 字

    阅读完需:约 5 分钟

9 月,一场热闹非凡的技术盛宴——2018 实时大数据 Meetup 要来啦!

最近两年,实时大数据快速发展,流式 SQL、在线机器学习、流式大数据查询、SQL 复杂时间处理(CEP SQL)、时空数据分析(Time GeoSpatial)与处理等高大上特性迅速成长起来,并扎根于科技金融、车联网、物联网、电商、智慧城市等应用场景,创造新的价值。

毋庸置疑,数据越实时价值越大,毫秒~ 秒级的实时流式大数据计算场景层出不穷。并且当下,从数据产生到分析结果的计算,数据时效性对业务的蓬勃发展起到更至关重要的作用。在面向毫秒的实时大数据计算场景上,Spark 和 Flink 各有所长。

而针对当前大数据领域分析场景需求各异而导致的存储冗余问题,Apache CarbonData 则提供了一种新的融合数据存储方案,以一份数据同时支持快速过滤查找和各种大数据离线分析和实时分析。目前,CarbonData 已在 20+ 企业生产环境上部署应用。

因此,本次 Meetup 将深度解析大数据实时流计算两大引擎 Apache Spark(Structured Streaming) 、Apache Flink 和社区新贵 Apache CarbonData 技术与实践,并将融合实时的数据存储方案。这些来自于开源社区和一线企业的实践经验,将带给大家关于实时大数据技术的更多落地思考。

插入主视觉图

本次 Meetup 将开设为期一整天的演讲 + 动手实训活动,并集合了 Databricks、华为云及美团的大咖级嘉宾。他们的集体「授业解惑」一定能帮你更好地进阶 Spark、Flink 及 CarbonData 开发,用更开放的视角实操大数据实时流计算。

这场技术盛宴已开启限额免费报名通道!

上午场 Meetup 演讲嘉宾

本次 Meetup 汇聚了实时大数据领域优秀的工程师、分析师、代码贡献者及一线实践者。

这些嘉宾包括 Databricks 工程师及 Spark Structured Streaming 项目带头人 Tathagata Das、华为云相关专家、美团点评专家,他们长期活跃在 Apache 开源社区,并担任 PMC 和 Committer 关键技术角色。

其中,作为 Spark Structured Streaming 的主要开发人员,Tathagata Das 将从推动者的视角分享 Spark Structured Streaming 当前的一些进展,为工程师们基于其特性更好地开发提供成熟思路。其他三位业内大牛讲师,也将带来他们对 Spark、Flink 及 CarbonData 的技术观察和最佳实践分享。

演讲话题

  • Easy, Scalable, Fault-Tolerant Stream Processing with Structured Streaming in Apache Spark
  • What's New in Apache CarbonData 1.5
  • 美团点评 Flink 实践与应用
  • 智能流计算:Flink/Spark 在 CloudStream 中的应用实践

(点击「阅读原文」,查看所有演讲嘉宾及演讲议题摘要)

活动日程 & 报名方式

时间:9 月 8 日全天(上午场 Meetup+ 下午场 Workshop)

地点:北京·车库咖啡

长按上方二维码扫码,或点击文末阅读原文,一键直达报名窗口 :-)

敲黑板!此次活动将全!程!免!费!,报名人满即通道关闭,请尽快预约席位!

下午场 Workshop 预告

本次下午场 Workshop 将设置三大环节:

  • 第一环节DEMO 演示:基于 Spark+CarbonData 完成各种大数据分析(实时数据查询、多维过滤查询,多维统计分析等)。
  • 第二环节将由参加者基于指定命题,完成实时流计算分析典型场景实践;参与者还可以现场完成自己设计的实时计算作业。
  • 第三环节为自由讨论,相关专家将现场解答大家实际操作中的问题。

报名或咨询下午场 Workshop的伙伴们,请加本次活动小助手微信 ID:geekbang111(备注:meetup),获得报名链接及更多信息!

惊喜礼物

报名参会且到场的朋友们均可获得 2018 实时大数据 Meetup 限量版 T 恤一件,以及其他惊喜礼品。进一步参与下午场 Workshop 活动,还可以收集更多惊喜小礼物,保证满载而归!

2018-08-27 19:003369
用户头像
Cherry倩芸 InfoQ高级策划编辑

发布了 51 篇内容, 共 24.1 次阅读, 收获喜欢 34 次。

关注

评论

发布
暂无评论
发现更多内容

Dubbo源码浅析(一)—RPC框架与Dubbo

京东科技开发者

实时监控的力量:观测云如何提升业务响应速度

可观测技术

实时监控

10分钟构建服务监控工具

coxi_vv

监控 Prometheus 1Panel

HarmonyOS应用程序访问控制探究

白晓明

HarmonyOS NEXT

网络安全警钟:Windows TCP/IP协议出现高危漏洞

郑州埃文科技

TCP IP 漏洞

案例分享 | 八爪鱼RPA在社区医疗流程自动化系统中的应用

八爪鱼采集器︱RPA机器人

RPA 自动化 流程

数据驱动决策:观测云在企业战略中的作用

可观测技术

数据结构

AI 流媒体音乐平台 Melodio 发布;多模态模型 VITA 可打断无需唤醒词丨 RTE 开发者日报

RTE开发者社区

别再被坑了! JavaScript类型检测的最佳实践

Immerse

JavaScript 数据结构 数据类型

Mobpush 标签推送

MobTech袤博科技

10分钟构建运维安全审计系统

coxi_vv

开源 运维 1Panel jumpserver

20分钟构建企业知识库

coxi_vv

开源 halo 1Panel 开源知识库

如何在Python中使用免费的DeepL翻译API

幂简集成

Python 翻译 API 免费API

Go 语言 viper 库上手实践

FunTester

PromQL:观测云中的监控数据分析利器

可观测技术

数据分析

每个Moka招聘系统用户都需要一套八爪鱼RPA

八爪鱼采集器︱RPA机器人

RPA 自动化 招聘 智能化

10分钟构建业务数据大屏

coxi_vv

服务器 数据可视化 开源软件 DataEase 1Panel

代理IP为什么很难达到100%的利用率?

IPIDEA全球HTTP

一次JVM GC长暂停的排查过程

京东科技开发者

【后台体验】运营后台订单详情设计分享

京东科技开发者

用户体验的优化:观测云在用户行为分析中的应用

可观测技术

用户体验

数据安全与合规性:观测云在保护企业数据中的角色

可观测技术

数据安全

AI+仿真,助力工业智能化变革:面向仿真工程师的机器学习工具

Altair RapidMiner

人工智能 AI 设计 仿真 altair

10分钟构建Web 应用防火墙-uuWAF

coxi_vv

开源 waf 1Panel

10分钟构建内网邮件服务器

coxi_vv

开源软件 1Panel 开源邮件服务器 邮件服务器

你真了解实时大数据?高手们如何玩转开源流计算?_大数据_Cherry倩芸_InfoQ精选文章