Ashish Thusoo， Qubole 的 CEO 和联合创始人，最近在 Enterprise Data World Conference (EDW) 上谈到了作为一种服务产品的“云中巨象” Hadoop 。大数据作为服务而不是一个产品会成为一个趋势，Hadoop 作为一种服务提供，旨在帮助机构处理大规模运行的Hadoop 服务的挑战和成本。这些基于云服务的解决方案也可以从云服务的其他功能中获益，如动态配置、计算和存储的灵活性以及在多个地区的可用性。
Ashish 在开始谈论时说到，现在数据的性质，包括海里的交互数据，都是非结构化的。而不仅仅是我们长期以来传统应用程序里处理数据结构化数据。
分析的性质也发生了改变。Ashish 谈到了分析值从描述性向规范性分析的发展。
- 描述性分析（发生了什么？）
- 诊断性分析（为什么发生？）
- 预测性分析（将会发生什么？）
- 规范性分析（我们怎样才会让它发生？）
云提供很多好处，如按需和弹性扩展架构，高可扩展的对象存储和处理，和自适应的基础设施。使用云大数据平台提供更快的生产时间、敏捷和基础设施的灵活性以及显著降低成本。
Virtual Private Cloud (VPC) 提供隔离访问计算和存储，以及提供安全实践。VPC 的安全性包括云存储中的数据和网络数据，以及基于访问计算和存储的角色加密选项。
现代数据处理平台包括多个处理引擎，可以处理各种案例，如下面列举出：
- 复杂批次处理 SQL，Hive
- 数据科学，Spark
- 简单交互 SQL 查询，Presto
- 批量数据清洗（ETL），Map Reduce
Ashish 还谈论了基于云平台的大数据参考架构，包括多租户数据访问、引擎统一、云计算服务和可移植性服务等。他总结报告说，Hadoop 作为一种服务提供在大数据架构决策时是一个吸引人眼球的选择。
公众号推荐：
跳进 AI 的奇妙世界，一起探索未来工作的新风貌！想要深入了解 AI 如何成为产业创新的新引擎？好奇哪些城市正成为 AI 人才的新磁场？《中国生成式 AI 开发者洞察 2024》由 InfoQ 研究中心精心打造，为你深度解锁生成式 AI 领域的最新开发者动态。无论你是资深研发者，还是对生成式 AI 充满好奇的新手，这份报告都是你不可错过的知识宝典。欢迎大家扫码关注「AI前线」公众号，回复「开发者洞察」领取。
暂无签名
分布式云行业实践指南（2023）
业内首个分布式云行业实践方法论、工具箱。
评论