发布在即!企业 AIGC 应用程度测评,3 步定制专属评估报告。抢首批测评权益>>> 了解详情
写点什么

Apache Flink 发布 0.8.0,公布 2015 年规划

  • 2015-01-27
  • 本文字数:773 字

    阅读完需:约 3 分钟

Apache Flink 发布了该项目的 0.8.0 版本。除了常规的性能、兼容性和稳定性方面的改进之外,这一版本增加了一个流式数据的 Scala API ,填补目前为止仍然缺乏的流式数据处理的能力。在大概 9 个月之前加入孵化器后,Apache Flink 最近被升级为顶级的Apache 项目。

Apache Flink 是一个与 Apache Spark 有着相似目标的开源项目。它运行在 Hadoop stack 之上,通过提供比原有 Hadoop 系统的 map 和 reduce 操作更加强大的数据操作能力,让开发者可以更容易地编写可扩展的数据处理系统。

Kostas Tzoumas 最近发布了一个关于Flink 介绍和Flink2015 年计划概览的演示文稿,他是Flink 的代码提交者和一个位于柏林的Apache Flink 相关的初创企业 data Artisans 的合伙人。

Flink 的关键点之一,是它使用了一种类似于 SQL 数据库查询优化的方法,这也是它与当前版本的 Apache Spark 的主要区别。它可以将全局优化方案应用于某个查询之上以获得更佳的性能。例如,Flink 可以重新排序操作以提升性能,或者根据相关数据集的属性,选择不同的实现方式来执行给定的操作符。

正如演示文稿中所提到的,这让 Flink 可以以流水线的方式执行一个操作序列,而 Spark 则需要一个接一个地执行不同的步骤。

Flink 还提供类似迭代器的操作符以获得更多全局优化方面的潜能。利用这种操作符,Flink 允许用户将迭代公式化,作为查询语句的一部分,而不需要在 for 循环中执行查询语句。

2015 年规划的特性包括更好的内存管理和容错机制,交互使用的支持,统一的批处理和流处理,机器学习库 Mahout 的集成以及其他若干改进。

Flink 最初源自于正在进行中的研究性项目 Stratosphere 的一部分。Flink 还是柏林大数据中心的主平台,该数据中心是由德国政府资助的研究性项目,其目的是将机器学习研究者和可扩展的数据处理研究者汇集一处。

查看英文原文: Apache Flink 0.8.0 Released, Roadmap for 2015 Published

公众号推荐:

2024 年 1 月,InfoQ 研究中心重磅发布《大语言模型综合能力测评报告 2024》,揭示了 10 个大模型在语义理解、文学创作、知识问答等领域的卓越表现。ChatGPT-4、文心一言等领先模型在编程、逻辑推理等方面展现出惊人的进步,预示着大模型将在 2024 年迎来更广泛的应用和创新。关注公众号「AI 前线」,回复「大模型报告」免费获取电子版研究报告。

AI 前线公众号
2015-01-27 09:113002
用户头像

发布了 75 篇内容, 共 61.9 次阅读, 收获喜欢 6 次。

关注

评论

发布
暂无评论
发现更多内容

主管发话:一周搞不定用友U8 ERP跨业务数据分析,明天就可以“毕业”了

葡萄城技术团队

数据分析 BI 用友

EAM系统解决方案

低代码小观

资产管理 企业管理系统 企业设备管理 设备巡检管理系统 企业管理软件

leetcode 69. Sqrt(x) x 的平方根(简单)

okokabcd

LeetCode 查找

易安联参编《SASE技术与应用场景白皮书》正式发布

权说安全

网络安全 sase

ironSource开通业内首家微信客户服务平台, 为中国客户提供本地支持

Geek_2d6073

物联网时代,如何保障嵌入式系统安全?

龙智—DevSecOps解决方案

klocwork perforce Helix QAC

企业网站该怎样选择网站域名?

源字节1号

软件开发

极客星球 | 机器学习赋能商业地产决策进阶

MobTech袤博科技

域成员服务器怎么会突然脱域?

BUG侦探

脱域 域信任关系 windows更新

如何提高团队的工作效率?

ShineScrum捷行

Scrum 敏捷 团队效率

Spring Cloud OpenFeign 的 5 个优化小技巧!

王磊

SpringCloud

错过了太后悔,九大绝招大公开,详解华为低时延技术

华为云开发者联盟

云计算 音视频 华为云

离线数仓建设,企业大数据的业务驱动与技术实现

袋鼠云数栈

静亦求精,罗技MX高性能键鼠组合上市!

Geek_2d6073

打开人工智能“黑盒”,发展可解释、可扩展、可信赖、安全可靠的人工智能

博文视点Broadview

微信小程序和 uniapp 的区别是什么?

CRMEB

为什么要上云,您的团队适合上云吗?Atlassian白皮书给你答案

龙智—DevSecOps解决方案

Atlassian atlassian云版

TDengine 社区问题双周精选 | 第一期

TDengine

数据库 tdengine

乏善可陈的Neuralink

图灵教育

ShardingSphere 在金融支付场景下的实践与调优

SphereEx

Apache 数据库 开源 ShardingSphere SphereEx

2022年中国互联网母婴行业年度分析

易观分析

母婴产品

达人专栏 | 还不会用 Apache Dolphinscheduler?大佬用时一个月写出的最全入门教程【三】

Apache DolphinScheduler

Apache 大数据 开源 DolphinScheduler workflow

如何实现客户自助服务?打造产品知识库

小炮

知识库

关于2022年12代C/C++Linux服务器开发高级架构师课程体系分析

C++后台开发

后端开发 Linux服务器开发 C++后台开发 Linux后台开发 服务器开发架构师

Jira工时管理插件线上安装量过百,龙智产品赢得全球企业信赖

龙智—DevSecOps解决方案

Jira插件 龙智 龙智自研插件

一文了解游戏美术开发流程,以及可能遇到的问题

龙智—DevSecOps解决方案

perforce Helix Core Helix DAM

数据治理项目调研环节思考

agileai

项目管理 数据中台 数据仓库 数据治理 主数据

百度吴甜提出大模型落地关键路径 业内首发行业大模型

百度开发者中心

卷入上海疫情,被封40天,我的一点心得

大数据梦想家

程序员 程序人生 疫情防控

手把手教你如何高效落地单项目管理 | 一看既会

阿里云云效

云计算 阿里云 项目管理 敏捷开发 单项目管理

如何 DIY 一款属于自己的【3D 重力感应 动态壁纸 】,看完这篇文章你也可以学会

呆呆敲代码的小Y

android Unity 壁纸 动态壁纸

Apache Flink发布0.8.0,公布2015年规划_DevOps & 平台工程_Mikio Braun_InfoQ精选文章