“AI 技术+人才”如何成为企业增长新引擎?戳此了解>>> 了解详情
写点什么

Hortonworks 在壮大:新增对 Kafka 的支持

  • 2014-09-03
  • 本文字数:787 字

    阅读完需:约 3 分钟

据Gigaom 消息透露,Hortonworks 已将Apache Kafka 加入其Hadoop 软件平台的技术预览版中。尽管Kafka 相对于Spark 在流行度方面稍有逊色,但是它也能够被广泛运用于一些大型互联网公司的应用架构中。同时,它还提供了大数据的云存储、处理和分析等服务,能够应对多种来源和多格式的大数据。Kafka 最初是由LinkedIn 设计的一个高吞吐量、分布式、基于发布订阅模式的消息系统,并可用于将Web 应用消息快速传递到合适的数据服务中。Kafka 集成其他数据服务架构如下图所示:

在整合Kafka 之前,Hortonworks 就考虑到了Hadoop 的批处理设计以及广大用户的需求。 于是,Hortonworks 就在其Hadoop 软件平台中集成了Apache Storm 实时计算系统和Spark 并行处理框架,可以看出Hortonworks 在发展大数据技术的同时,正在向快数据技术发展,以迎合那些需要拥有自己大数据基础架构、工程导向的公司,包括已经拥有先进的数据架构的企业,以及新一批的Web 创业公司,甚至包括一些传统企业。

增加对Kafka 的支持看上去似乎是不起眼的举措,Hortonworks 却能籍此与竞争对手(如Cloudera 和MapR 等)形成差异化的优势。尽管Cloudera 和MapR 在自己的产品中也整合了不少开源工具,但它们的收入主要依赖专有软件的授权费用;而Hortonworks 的业务策略是通过推广百分百开源的产品,获取更多用户,并在用户开始大规模部署时收取服务费用。故Hortonworks 看上去对那些需要Storm、Kafka、Spark、Hadoop 等开源技术的客户来说更有吸引力。

另外,据Hortonworks CTO Eric Baldeschwieler 透露,Spark 在不久的将来会取代Hadoop 中的MapReduce,成为大数据生态圈内编写和分享算法的标准平台。


感谢郭蕾对本文的审校。

给InfoQ 中文站投稿或者参与内容翻译工作,请邮件至 editors@cn.infoq.com 。也欢迎大家通过新浪微博( @InfoQ )或者腾讯微博( @InfoQ )关注我们,并与我们的编辑和其他读者朋友交流。

2014-09-03 06:241587
用户头像

发布了 92 篇内容, 共 44.8 次阅读, 收获喜欢 5 次。

关注

评论

发布
暂无评论
发现更多内容

Spring如何选择类构造器

申屠鹏会

翻译 Go 语言

1 学习性能优化的要点

我是程序员小贱

解析 hashMap 源码之基本操作 get

shengjk1

Java hashmap

解析 HashMap 源码概括

shengjk1

Java hashmap

一次由默认参数引起的思考

白日梦想家

编程 思考

全面了解CGI、FastCGI、PHP-FPM

书旅

CGI PHP-FPM Fast-CGI

你生日那天的宇宙什么样子知道?我全部给你吧!

我是程序员小贱

JDK中居然也有反模式接口常量

看山

Java 源码阅读

为什么考研,考研能给你带来什么?说说我的感受!

我是程序员小贱

Rust特征与泛型区别点

编号94530

rust 泛型 封装、继承、多态

学习技术先从学会使用搜索引擎开始

我是程序员小贱

1 时间复杂度总结

我是程序员小贱

高效程序员的45个习惯:敏捷开发修炼之道(1)

石云升

读书笔记 敏捷开发

航运区块链 抗疫危中有机

CECBC

区块链 航运

目前数字人民币试点仍是“4+1” 别误读了

CECBC

数字货币 央行 人民币

区块链技术--公证人机制

CECBC

区块链 数字货币 公证人

正则表达式位置匹配——匹配两个特殊符号中间的内容

jerry.mei

Java 正则表达式 大前端 字符串匹配

螺旋矩阵算法,臭代码解析,微服务架构 Service Mesh 服务网格 RPC 协议实现原理 Dubbo 通讯协议,John 易筋 ARTS 打卡 Week 13

John(易筋)

ARTS 打卡计划

翻译: Effective Go (7)

申屠鹏会

翻译 Go 语言

Docker搭建PHP+Nginx+MySQL+Redis

书旅

Docker 镜像 lnmp

华为的“少年天才”攀登者,出发向智能存储的“奥林帕斯山”

脑极体

结算场景下的跳坑记

印哥爱学习

troubleshoot之:使用JFR分析性能问题

程序那些事

Java 性能分析 jfr

平均负载是什么?

我是程序员小贱

敏捷到底是个什么鬼?

刘华Kenneth

程序员 敏捷 change

解析 HashMap 源码之基本操作 put

shengjk1

Java hashmap

MySQL 基准测试

多选参数

MySQL

让你起飞的20个Linux命令骚操作

我是程序员小贱

毕玄大佬的分享以及给我的感悟

白色蜗牛

Java 程序员 技术 职场 架构师

这样看mybatis,谁都会分析源码!

诸葛小猿

源码 mybatis mybatis源码

Bash 脚本的单元测试

柴锋

bash Linux DevOps Unit Test Shell

Hortonworks在壮大:新增对Kafka的支持_语言 & 开发_李士窑_InfoQ精选文章