【AICon】探索RAG 技术在实际应用中遇到的挑战及应对策略!AICon精华内容已上线73%>>> 了解详情
写点什么

Flink 流批一体的技术架构以及在阿里的实践

  • 2019-08-03
  • 本文字数:619 字

    阅读完需:约 2 分钟

Flink 流批一体的技术架构以及在阿里的实践

在 QCon 北京 2019 大会上,杨克特(鲁尼)讲师做了《Flink 流批一体的技术架构以及在阿里的实践》主题演讲,主要内容如下。


演讲简介


Apache Flink 在诞生之初就确立了使用同一个引擎支持多种计算形态的目标,包括流计算,批处理和机器学习等等。阿里巴巴在选择 Flink 作为新一代大数据引擎时也坚定不移的在贯彻这一目标。在我们的内部版本 Blink 中,我们使用了 SQL 作为流批一体的统一入口,并且在流计算和批处理上都做了大量的优化。流批一体也开始真正的发挥出了价值,在我们的搜索离线数据处理和机器学习平台上均获得了较好的效果。本演讲将分享 Blink 针对流批一体化的场景做了哪些优化,在支持实际业务上碰到了哪些问题,我们又是怎么解决的。

听众受益

  1. 了解 Flink SQL 的技术栈和未来的方向;

  2. 流批一体化如何在业务中产生实际价值;

  3. 流批一体化面临的业务挑战和我们是如何解决的。


讲师介绍


杨克特(鲁尼)


阿里巴巴 高级技术专家


杨克特,阿里花名“鲁尼”,高级技术专家,2011 年于浙江大学硕士毕业。在加入阿里巴巴后,先是从事搜索引擎相关系统的开发,包括搜索引擎后台,新索引的设计和优化,以及调度系统的设计和研发。在转入大数据相关领域后,先后负责过基于 HBase 的实时增量系统,基于 Druid 的 OLAP 分析系统以及 Blink SQL 的优化和开发。在开源领域,杨克特是 Apache Flink 的 Committer,同时也是 Apache Druid (incubating)的 Committer。












完整演讲 PPT 下载链接


https://qcon.infoq.cn/2019/beijing/schedule


2019-08-03 08:006521

评论

发布
暂无评论
发现更多内容

白话Mysql的锁和事务隔离级别!死锁、间隙锁你都知道吗?

Java鱼仔

MySQL 高可用

第十一周 - 总结

jizhi7

2 期架构师训练营 - 第十三周作业与总结

云飞扬

架构师训练营第2期

iOS中MVC、MVP、MVVM、VIPER等技术框架的选型与实践

行者

架构设计 Architecture

大作业一

jizhi7

第11周学习总结

Binary

第十一周课后练习

Binary

大作业一:

未来已来

记录一次BAT一线互联网公司前端JavaScript面试

我是哪吒

JavaScript 学习 面试 大前端 2月春节不断更

产品经理训练营--第四周作业

月亮 😝

快递架构设计

梧桐

怀乡恋土的人们

熊斌

学习 2月春节不断更

第十三周-总结

jizhi7

与前端训练营的日子 -- Week15

SamGo

学习

第四章作业

Kalman

产品经理 产品经理训练营

第十二周总结

jizhi7

协会组织如何实现数字化落地应用?

boshi

数字化转型 七日更

数组与链表学习总结

Nick

数组 链表 数据结构与算法

架构内容

梧桐

第十周作业总结

jizhi7

第四章学习总结

Kalman

产品经理 产品经理训练

2 期架构师训练营 - 第十周作业与总结

云飞扬

架构师训练营第2期

产品 0 期 - 第四/五周作业

Jxin

大作业(二)-知识点

hunk

架构师训练营第2期

MyBatis专栏 - 二级缓存

小马哥

Java mybatis 七日更 2月春节不断更

大作业二

jizhi7

2 期架构师训练营 - 第十二周作业与总结

云飞扬

架构师训练营第2期

week11 作业

zbest

架构师训练营 4 期 第6周

引花眠

架构师训练营 4 期

2 期架构师训练营 - 第十一周作业与总结

云飞扬

架构师训练营第2期

「架构师训练营 4 期」 第六周 - 001&2

凯迪

架构师训练营 4 期

Flink 流批一体的技术架构以及在阿里的实践_数据库_杨克特(鲁尼)_InfoQ精选文章