NVIDIA 初创加速计划,免费加速您的创业启动 了解详情
写点什么

Flink 流批一体的技术架构以及在阿里的实践

  • 2019-08-03
  • 本文字数:619 字

    阅读完需:约 2 分钟

Flink 流批一体的技术架构以及在阿里的实践

在 QCon 北京 2019 大会上,杨克特(鲁尼)讲师做了《Flink 流批一体的技术架构以及在阿里的实践》主题演讲,主要内容如下。


演讲简介


Apache Flink 在诞生之初就确立了使用同一个引擎支持多种计算形态的目标,包括流计算,批处理和机器学习等等。阿里巴巴在选择 Flink 作为新一代大数据引擎时也坚定不移的在贯彻这一目标。在我们的内部版本 Blink 中,我们使用了 SQL 作为流批一体的统一入口,并且在流计算和批处理上都做了大量的优化。流批一体也开始真正的发挥出了价值,在我们的搜索离线数据处理和机器学习平台上均获得了较好的效果。本演讲将分享 Blink 针对流批一体化的场景做了哪些优化,在支持实际业务上碰到了哪些问题,我们又是怎么解决的。

听众受益

  1. 了解 Flink SQL 的技术栈和未来的方向;

  2. 流批一体化如何在业务中产生实际价值;

  3. 流批一体化面临的业务挑战和我们是如何解决的。


讲师介绍


杨克特(鲁尼)


阿里巴巴 高级技术专家


杨克特,阿里花名“鲁尼”,高级技术专家,2011 年于浙江大学硕士毕业。在加入阿里巴巴后,先是从事搜索引擎相关系统的开发,包括搜索引擎后台,新索引的设计和优化,以及调度系统的设计和研发。在转入大数据相关领域后,先后负责过基于 HBase 的实时增量系统,基于 Druid 的 OLAP 分析系统以及 Blink SQL 的优化和开发。在开源领域,杨克特是 Apache Flink 的 Committer,同时也是 Apache Druid (incubating)的 Committer。












完整演讲 PPT 下载链接


https://qcon.infoq.cn/2019/beijing/schedule


2019-08-03 08:006547

评论

发布
暂无评论
发现更多内容

Sprint Review != Demo——《Scrum指南》重读有感(4)

Bruce Talk

Scrum 敏捷 随笔 Agile

El Camino de Santiago

escray

6月日更

Redis 缓存的三大问题及其解决方案

xcbeyond

redis 缓存 6月日更

整数划分问题(详解 n > m 情况)

若尘

数据结构 6月日更

Bzz节点挖矿系统搭建,Bzz分币系统源码

【译】编写整洁 React 代码的简单实践

KooFE

大前端 React 6月日更 整洁代码

相似度计算-句子

Qien Z.

nlp 6月日更 tf-idf

Java程序员【面试】与【进阶】3个最佳学习方法

Java架构师迁哥

Bzz节点分币系统搭建,Bzz矿机挖矿系统

区块链+数字政务:成都高新区如何创新

CECBC

戴着镣铐起舞的算法市场

脑极体

Atlassian 最受欢迎的分析工具强势融入 Confluence Data Center!

Atlassian

DevOps 知识管理 Atlassian Jira Confluence

MySQL基础之五:其他过滤方式

打工人!

myslq 6月日更

我的程序员生涯(1)

胡途

程序员 职业生涯

我的程序员生涯(2)

胡途

程序员 职业生涯

Python——注释和字符串的拼接

在即

6月日更

Kubernetes手记(4)- 命令入门

雪雷

6月日更

让JavaScript在WebAssembly上快速运行

代码先生

JIT webassembly WASI

应用,才是区块链的终极归宿

CECBC

架构训练营模块 5 作业 - 江哲

江哲

理解IM消息“可靠性”和“一致性”问题,以及解决方案探讨

JackJiang

即时通讯 IM 可靠消息最终一致

自制文件系统 —— 02 开发者的福音,FUSE文件系统

奇伢云存储

Linux 文件系统 FUSE

区块链能否为应对气候变化 提供解决方案?

CECBC

这个 “少年黑客”,用黑科技守护独居老人

阿里云视频云

阿里云 计算机视觉 音视频 养老

网络攻防学习笔记 Day38

穿过生命散发芬芳

网络攻防 6月日更

APISIX2.6微服务网关入门

菠萝吹雪—Code

架构实战营

JavaScript 代码逻辑判断的优化

编程三昧

JavaScript 大前端 代码质量 代码优化 编程思想

如何使用Tauri和Ember.js创建小型、快速和酷的桌面应用程序

代码先生

tauri ember.js desktop程序

Git使用

xujiangniao

5分钟速读之Rust权威指南(十八)

wzx

rust 范型 trait

平衡计分卡- 战略落地的工具

石云升

创业 战略 职场经验 6月日更

Flink 流批一体的技术架构以及在阿里的实践_数据库_杨克特(鲁尼)_InfoQ精选文章