Apache Spark 2.4 和未来

阅读数:9286 2019 年 8 月 17 日 00:00

Apache Spark 2.4 和未来

QCon 广州 2019 大会上,王耿亮讲师做了《Apache Spark 2.4 和未来》主题演讲,主要内容如下。

演讲简介

Apache Spark 2.4 带来了很多的新功能和优化提升, 包括 barrier execution mode、flexible streaming sink,、内置 Avro 数据格式支持、PySpark’s eager evaluation mode、Kubernetes 支持、高阶函数、Scala 2.12 支持等。

在接下来的 3.0 版本发布中, Spark 将支持自适应的 SQL 执行, 使用新的 Data Source API, 并且支持 Cypher 查询语言等。

听众受益

  1. 对 Apache Spark 2.4 的主要新功能有总体了解。
  2. 了解下一个版本的主要新功能。

讲师介绍

王耿亮

Databricks 研发工程师

Apache Spark 社区活跃贡献者, 主要的工作内容是 Spark SQL 内核的开发。

Apache Spark 2.4 和未来

Apache Spark 2.4 和未来

Apache Spark 2.4 和未来

Apache Spark 2.4 和未来

Apache Spark 2.4 和未来

Apache Spark 2.4 和未来

Apache Spark 2.4 和未来

Apache Spark 2.4 和未来

Apache Spark 2.4 和未来

Apache Spark 2.4 和未来

完整演讲 PPT 下载链接

https://qcon.infoq.cn/2019/guangzhou/schedule

评论

发布