写点什么

Apache Flink 发布 0.8.0,公布 2015 年规划

2015 年 1 月 27 日

Apache Flink 发布了该项目的 0.8.0 版本。除了常规的性能、兼容性和稳定性方面的改进之外,这一版本增加了一个流式数据的 Scala API ,填补目前为止仍然缺乏的流式数据处理的能力。在大概 9 个月之前加入孵化器后,Apache Flink 最近被升级为顶级的Apache 项目。

Apache Flink 是一个与 Apache Spark 有着相似目标的开源项目。它运行在 Hadoop stack 之上,通过提供比原有 Hadoop 系统的 map 和 reduce 操作更加强大的数据操作能力,让开发者可以更容易地编写可扩展的数据处理系统。

Kostas Tzoumas 最近发布了一个关于Flink 介绍和Flink2015 年计划概览的演示文稿,他是Flink 的代码提交者和一个位于柏林的Apache Flink 相关的初创企业 data Artisans 的合伙人。

Flink 的关键点之一,是它使用了一种类似于 SQL 数据库查询优化的方法,这也是它与当前版本的 Apache Spark 的主要区别。它可以将全局优化方案应用于某个查询之上以获得更佳的性能。例如,Flink 可以重新排序操作以提升性能,或者根据相关数据集的属性,选择不同的实现方式来执行给定的操作符。

正如演示文稿中所提到的,这让 Flink 可以以流水线的方式执行一个操作序列,而 Spark 则需要一个接一个地执行不同的步骤。

Flink 还提供类似迭代器的操作符以获得更多全局优化方面的潜能。利用这种操作符,Flink 允许用户将迭代公式化,作为查询语句的一部分,而不需要在 for 循环中执行查询语句。

2015 年规划的特性包括更好的内存管理和容错机制,交互使用的支持,统一的批处理和流处理,机器学习库 Mahout 的集成以及其他若干改进。

Flink 最初源自于正在进行中的研究性项目 Stratosphere 的一部分。Flink 还是柏林大数据中心的主平台,该数据中心是由德国政府资助的研究性项目,其目的是将机器学习研究者和可扩展的数据处理研究者汇集一处。

查看英文原文: Apache Flink 0.8.0 Released, Roadmap for 2015 Published

2015 年 1 月 27 日 09:112639
用户头像

发布了 75 篇内容, 共 58.2 次阅读, 收获喜欢 4 次。

关注

评论

发布
暂无评论
发现更多内容

用于可视化软件体系结构的C4模型(转载)

清风徐徐

项目交付二三事

飞哥

持续交付

【架构师训练营 - 作业 -3】组合模式

小动物

极客大学架构师训练营 作业 第三周

大白话Java多线程,小白都能看的懂的哦

java金融

Java 多线程 线程安全 创建线程方式 什么是多线程

奈学教育《百万架构师》课程大纲

古月木易

极客大学架构师训练营

中心化是人性,去中心化是技术

CECBC区块链专委会

区块链技术 去中心化 超级节点

week3 学习总结

不在调上

极客大学架构师训练营

week3

Geek_2e7dd7

架构师训练营第 3 周 _ 学习总结

方舟勇士

课程总结

架构师训练营第三周课后作业

竹森先生

极客大学架构师训练营

第三周作业

芒夏

极客大学架构师训练营

【架构师训练营 - 周总结 -3】设计模式、重构

小动物

总结 极客大学架构师训练营 第三周

组织协同-研发项目责任矩阵

飞哥

研发管理 团队组织

【week03】作业1

chengjing

week 3

陈皮

架构师训练营week3学习总结

Frank Zeng

当教育遇上区块链,会擦出什么样的火花?

CECBC区块链专委会

区块链技术 去中心化 防篡改 教育资源共享

第三周作业

andy

从单机事务到分布式事务

ElvinYang

万恶的NPE差点让我半个月工资没了

java金融

Java 程序员 互联网 NPE 空指针

第三周作业

戴维斯

极客大学架构师训练营

奈学教育《百万架构师》课程大纲

奈学教育

极客大学架构师训练营

有益思考一则:概率与格局

石君

思考 思维方式 格局

第三周总结

andy

【week03】总结

chengjing

架构师训练营Week03

Frank Zeng

瓷都景德镇牵手蚂蚁区块链,重塑非遗陶瓷产业

CECBC区块链专委会

区块链技术 溯源 防篡改 景德镇 非遗

元年云“宽能力”拓宽成长型企业数字化升级之路

人称T客

week3 作业& 手撕单例模式

不在调上

Tweak原理与越狱防护

大冯宇宙😏😏

代码重构练习三

李广富

Apache Flink发布0.8.0,公布2015年规划-InfoQ