2天时间,聊今年最热的 Agent、上下文工程、AI 产品创新等话题。2025 年最后一场~ 了解详情
写点什么

你真了解实时大数据?高手们如何玩转开源流计算?

  • 2018-08-27
  • 本文字数:1488 字

    阅读完需:约 5 分钟

9 月,一场热闹非凡的技术盛宴——2018 实时大数据 Meetup 要来啦!

最近两年,实时大数据快速发展,流式 SQL、在线机器学习、流式大数据查询、SQL 复杂时间处理(CEP SQL)、时空数据分析(Time GeoSpatial)与处理等高大上特性迅速成长起来,并扎根于科技金融、车联网、物联网、电商、智慧城市等应用场景,创造新的价值。

毋庸置疑,数据越实时价值越大,毫秒~ 秒级的实时流式大数据计算场景层出不穷。并且当下,从数据产生到分析结果的计算,数据时效性对业务的蓬勃发展起到更至关重要的作用。在面向毫秒的实时大数据计算场景上,Spark 和 Flink 各有所长。

而针对当前大数据领域分析场景需求各异而导致的存储冗余问题,Apache CarbonData 则提供了一种新的融合数据存储方案,以一份数据同时支持快速过滤查找和各种大数据离线分析和实时分析。目前,CarbonData 已在 20+ 企业生产环境上部署应用。

因此,本次 Meetup 将深度解析大数据实时流计算两大引擎 Apache Spark(Structured Streaming) 、Apache Flink 和社区新贵 Apache CarbonData 技术与实践,并将融合实时的数据存储方案。这些来自于开源社区和一线企业的实践经验,将带给大家关于实时大数据技术的更多落地思考。

插入主视觉图

本次 Meetup 将开设为期一整天的演讲 + 动手实训活动,并集合了 Databricks、华为云及美团的大咖级嘉宾。他们的集体「授业解惑」一定能帮你更好地进阶 Spark、Flink 及 CarbonData 开发,用更开放的视角实操大数据实时流计算。

这场技术盛宴已开启限额免费报名通道!

上午场 Meetup 演讲嘉宾

本次 Meetup 汇聚了实时大数据领域优秀的工程师、分析师、代码贡献者及一线实践者。

这些嘉宾包括 Databricks 工程师及 Spark Structured Streaming 项目带头人 Tathagata Das、华为云相关专家、美团点评专家,他们长期活跃在 Apache 开源社区,并担任 PMC 和 Committer 关键技术角色。

其中,作为 Spark Structured Streaming 的主要开发人员,Tathagata Das 将从推动者的视角分享 Spark Structured Streaming 当前的一些进展,为工程师们基于其特性更好地开发提供成熟思路。其他三位业内大牛讲师,也将带来他们对 Spark、Flink 及 CarbonData 的技术观察和最佳实践分享。

演讲话题

  • Easy, Scalable, Fault-Tolerant Stream Processing with Structured Streaming in Apache Spark
  • What's New in Apache CarbonData 1.5
  • 美团点评 Flink 实践与应用
  • 智能流计算:Flink/Spark 在 CloudStream 中的应用实践

(点击「阅读原文」,查看所有演讲嘉宾及演讲议题摘要)

活动日程 & 报名方式

时间:9 月 8 日全天(上午场 Meetup+ 下午场 Workshop)

地点:北京·车库咖啡

长按上方二维码扫码,或点击文末阅读原文,一键直达报名窗口 :-)

敲黑板!此次活动将全!程!免!费!,报名人满即通道关闭,请尽快预约席位!

下午场 Workshop 预告

本次下午场 Workshop 将设置三大环节:

  • 第一环节DEMO 演示:基于 Spark+CarbonData 完成各种大数据分析(实时数据查询、多维过滤查询,多维统计分析等)。
  • 第二环节将由参加者基于指定命题,完成实时流计算分析典型场景实践;参与者还可以现场完成自己设计的实时计算作业。
  • 第三环节为自由讨论,相关专家将现场解答大家实际操作中的问题。

报名或咨询下午场 Workshop的伙伴们,请加本次活动小助手微信 ID:geekbang111(备注:meetup),获得报名链接及更多信息!

惊喜礼物

报名参会且到场的朋友们均可获得 2018 实时大数据 Meetup 限量版 T 恤一件,以及其他惊喜礼品。进一步参与下午场 Workshop 活动,还可以收集更多惊喜小礼物,保证满载而归!

2018-08-27 19:003314
用户头像
Cherry倩芸 InfoQ高级策划编辑

发布了 51 篇内容, 共 23.8 次阅读, 收获喜欢 34 次。

关注

评论

发布
暂无评论
发现更多内容

热门实践丨如何结合实际业务进行 ECS 规格选型与容量验证

阿里巴巴云原生

阿里云 云原生 ECS PTS

从繁琐到高效,探索自动化部署的新境界

知者如C

了解 Apache JMeter 的使用方法

Liam

程序员 测试 Jmeter 接口测试 测试工具

Subquery? No, it's join!

Databend

NFTScan 成为 Binance NFT 官方 NFT 数据提供商

NFT Research

NFT\ API 接口

小白逆袭研发工程师 ——HDC.Cloud 2023华为云Astro分论坛

云计算 华为云 华为开发者大会2023

一道经典面试题:BeanFactory 和 FactoryBean 有何区别?

江南一点雨

spring

Arthas深入学习

Monin

工业物联网协议对比:MQTT Sparkplug vs OPC-UA

EMQ映云科技

mqtt 工业物联网 opc sparkplug

性能认证+最佳案例,阿里云 ACK@Edge 产品技术、落地能力获信通院综合认可

阿里巴巴云原生

阿里云 容器 云原生 ACK

MegEngine 使用小技巧:如何使用 MegCC 进行模型编译

MegEngineBot

深度学习 开源 AI 模型编译器 模型编译器

从自研走向开源的 TinyVue 组件库

OpenTiny社区

开源 前端 组件库 OpenTiny TinyVue

TDengine 3.0.4.0 重要特性之 Python UDF 实战分享

爱倒腾的程序员

精彩回顾|【2023 ACDU 中国行·深圳站】数据库主题交流活动成功举办!

墨天轮

MySQL 数据库 oracle postgresql 腾讯云

2023世界人工智能大会如约而至!低代码开发:点燃数智时代,让AI风口助您飞跃

不在线第一只蜗牛

人工智能 低代码 人工智能大会 行业风口

人脸识别技术的优缺点及其在实际应用中的影响

数据堂

喜讯!AntDB数据库入围上海信创公共服务平台产品目录

亚信AntDB数据库

数据库 AntDB AntDB数据库

Python案例分析|科学计算和数据分析 | 社区征文

TiAmo

Python 数据分析 科学计算 年中技术盘点

九科三周年专访丨创始人万正勇:拥抱AIGC新浪潮,赋能信创产业高质量发展

九科Ninetech

研产供销数据一体化,解码汽车集团企业的数据治理之道

袋鼠云数栈

数字化转型

云计算在商业运营中的潜力

天翼云开发者社区

云计算

你真了解实时大数据?高手们如何玩转开源流计算?_大数据_Cherry倩芸_InfoQ精选文章