写点什么

云中巨象——作为一种服务的 Hadoop

  • 2016-05-15
  • 本文字数:698 字

    阅读完需:约 2 分钟

Ashish Thusoo, Qubole 的 CEO 和联合创始人,最近在 Enterprise Data World Conference (EDW) 谈到了作为一种服务产品的“云中巨象” Hadoop 。大数据作为服务而不是一个产品会成为一个趋势,Hadoop 作为一种服务提供,旨在帮助机构处理大规模运行的Hadoop 服务的挑战和成本。这些基于云服务的解决方案也可以从云服务的其他功能中获益,如动态配置、计算和存储的灵活性以及在多个地区的可用性。

Ashish 在开始谈论时说到,现在数据的性质,包括海里的交互数据,都是非结构化的。而不仅仅是我们长期以来传统应用程序里处理数据结构化数据。

分析的性质也发生了改变。Ashish 谈到了分析值从描述性向规范性分析的发展。

  • 描述性分析(发生了什么?)
  • 诊断性分析(为什么发生?)
  • 预测性分析(将会发生什么?)
  • 规范性分析(我们怎样才会让它发生?)

云提供很多好处,如按需和弹性扩展架构,高可扩展的对象存储和处理,和自适应的基础设施。使用云大数据平台提供更快的生产时间、敏捷和基础设施的灵活性以及显著降低成本。

Virtual Private Cloud (VPC) 提供隔离访问计算和存储,以及提供安全实践。VPC 的安全性包括云存储中的数据和网络数据,以及基于访问计算和存储的角色加密选项。

现代数据处理平台包括多个处理引擎,可以处理各种案例,如下面列举出:

  • 复杂批次处理 SQL,Hive
  • 数据科学,Spark
  • 简单交互 SQL 查询,Presto
  • 批量数据清洗(ETL),Map Reduce

Ashish 还谈论了基于云平台的大数据参考架构,包括多租户数据访问、引擎统一、云计算服务和可移植性服务等。他总结报告说,Hadoop 作为一种服务提供在大数据架构决策时是一个吸引人眼球的选择。

查看英文原文 Elephant in the Cloud - Hadoop as a Service

2016-05-15 19:002758
用户头像

发布了 43 篇内容, 共 30.6 次阅读, 收获喜欢 7 次。

关注

评论

发布
暂无评论
发现更多内容

架构师训练营-学习总结-第一讲

吕浩

学习 极客大学架构师训练营

架构师课作业-第一周-架构文档

Tulane

极客大学架构师训练营

第一周作业--食堂就餐卡系统系统

技术小生

极客大学架构师训练营 UML

第一周学习总结

冯凯

极客大学架构师训练营

架构师训练营第一周作业

不谈

极客大学架构师训练营

食堂就餐卡系统架构设计

James-Pang

极客大学架构师训练营

食堂就餐卡系统架构设计文档

冯凯

极客大学架构师训练营

架构与UML总结

GalaxyCreater

架构师训练营学习心得【第一周】

王海

极客大学架构师训练营

架构师训练营-第一章-uml练习作业

而立

极客大学架构师训练营

架构师训练营第一周作业

陈靓-哲露

食堂就餐卡系统设计文档

架构5班杨娟Jessie

极客大学架构师训练营

架构师作业

老姜

极客大学架构师训练营

极客时间第0期架构师训练营第一周作业1

2流程序员

架构师训练营学习总结

王凯

架构师训练营第一周学习总结

James-Pang

极客大学架构师训练营

架构师训练营第一周总结

路人

程序员为什么技术这么厉害,赚得钱却不多?

金刚小书童

程序员 职业规划 技术管理

2020/06/09 架构师学习心得

架构5班杨娟Jessie

极客大学架构师训练营

第一周学习总结

CP

第一周学习总结

王铭铭

食堂就餐卡系统设计

傻傻的帅

系统设计

作业一:食堂就餐卡系统设计

Safufu

食堂就餐卡-系统设计文档

王凯

架构师训练营第一周 - 食堂就餐卡系统设计

Eric

极客大学架构师训练营

【架构师训练营-周总结-1】

小动物

总结 极客大学架构师训练营

食堂就餐卡系统架构设计

wei

带你了解 Ribbon 负载均衡器的实现

张晓辉

Spring Cloud

plantUML的安装和使用

技术小生

极客大学架构师训练营

架构师训练营No.1周总结

连增申

架构师第一周作业

路人

云中巨象——作为一种服务的Hadoop_服务革新_Srini Penchikala_InfoQ精选文章