AI实践哪家强?来 AICon, 解锁技术前沿,探寻产业新机! 了解详情
写点什么

云中巨象——作为一种服务的 Hadoop

  • 2016-05-15
  • 本文字数:698 字

    阅读完需:约 2 分钟

Ashish Thusoo, Qubole 的 CEO 和联合创始人,最近在 Enterprise Data World Conference (EDW) 谈到了作为一种服务产品的“云中巨象” Hadoop 。大数据作为服务而不是一个产品会成为一个趋势,Hadoop 作为一种服务提供,旨在帮助机构处理大规模运行的Hadoop 服务的挑战和成本。这些基于云服务的解决方案也可以从云服务的其他功能中获益,如动态配置、计算和存储的灵活性以及在多个地区的可用性。

Ashish 在开始谈论时说到,现在数据的性质,包括海里的交互数据,都是非结构化的。而不仅仅是我们长期以来传统应用程序里处理数据结构化数据。

分析的性质也发生了改变。Ashish 谈到了分析值从描述性向规范性分析的发展。

  • 描述性分析(发生了什么?)
  • 诊断性分析(为什么发生?)
  • 预测性分析(将会发生什么?)
  • 规范性分析(我们怎样才会让它发生?)

云提供很多好处,如按需和弹性扩展架构,高可扩展的对象存储和处理,和自适应的基础设施。使用云大数据平台提供更快的生产时间、敏捷和基础设施的灵活性以及显著降低成本。

Virtual Private Cloud (VPC) 提供隔离访问计算和存储,以及提供安全实践。VPC 的安全性包括云存储中的数据和网络数据,以及基于访问计算和存储的角色加密选项。

现代数据处理平台包括多个处理引擎,可以处理各种案例,如下面列举出:

  • 复杂批次处理 SQL,Hive
  • 数据科学,Spark
  • 简单交互 SQL 查询,Presto
  • 批量数据清洗(ETL),Map Reduce

Ashish 还谈论了基于云平台的大数据参考架构,包括多租户数据访问、引擎统一、云计算服务和可移植性服务等。他总结报告说,Hadoop 作为一种服务提供在大数据架构决策时是一个吸引人眼球的选择。

查看英文原文 Elephant in the Cloud - Hadoop as a Service

2016-05-15 19:002697
用户头像

发布了 43 篇内容, 共 30.3 次阅读, 收获喜欢 7 次。

关注

评论

发布
暂无评论
发现更多内容

在 Go 中使用 sqlx 替代 database/sql 操作数据库

江湖十年

数据库 后端 sql Go 语言

数字化扶乩的最佳语言是英语?

FN0

AIGC

CSS小技巧之悬停3D发光效果

南城FE

CSS 前端 动画 3D 交互

SpringWeb服务应用响应式Web开发组件:响应式编程和SpringBoot

互联网架构师小马

WMS 实物库存系统设计

红袖添香

系统设计 系统架构 供应链物流 WMS仓库管理 库存系统

Backdata.net 搜索引擎

Yongqiang

搜索引擎 导航网站

IT知识百科:什么是OTN——光传送网?

wljslmz

6 月 优质更文活动

Vue3中常用的Composition(组合)API-ref(引用)函数

不觉心动

6 月 优质更文活动

万字详解常用设计模式

越长大越悲伤

设计模式

如何评估大型语言模型(LLM)?

Baihai IDP

人工智能 深度学习 大模型 白海科技 大模型评估

2023-06-18:给定一个长度为N的一维数组scores, 代表0~N-1号员工的初始得分, scores[i] = a, 表示i号员工一开始得分是a, 给定一个长度为M的二维数组operatio

福大大架构师每日一题

golang 算法 rust 福大大架构师每日一题

当 Rokid 遇上函数计算

阿里巴巴云原生

阿里云 云原生 Rokid

xenomai内核解析--实时linux概述

沐多

RTOS 实时linux xenomai

在人工智能冲击下,IT部门的生存价值在哪里?

FN0

AIGC

微服务中「组件」集成

Java 架构

基于STM32的铁路自动围栏系统设计

DS小龙哥

6 月 优质更文活动

华为云CodeArts Build快速上手编译构建-进阶玩家体验

云计算 编译 开发 华为云

漫谈 SAP 产品里页面上的 Checkbox 设计与实现

汪子熙

SAP 前端设计 思爱普 6 月 优质更文活动

Kubernetes集群认证管理

穿过生命散发芬芳

6 月 优质更文活动

如何在 Linux 上列出磁盘?

wljslmz

6 月 优质更文活动

C语言编程—语法练习

芯动大师

C语言 语法 6 月 优质更文活动

做好演讲表达的道法术器(《如何激活你的表达思维》-- 培训收获)(68/100)

hackstoic

领导力 演讲 沟通

MySQL DeadLock -- 二级索引导致的死锁

红袖添香

MySQL 数据库 数据库死锁

飞书深诺多系统数据同步方案

飞书深诺技术团队

Vue3中常用的Composition(组合)API-初识setup

不觉心动

6 月 优质更文活动

Vue3中常用的Composition(组合)API-ref(引用)函数

不觉心动

6 月 优质更文活动

前端如何处理「并发」问题?

不叫猫先生

并发 axios 6 月 优质更文活动

培育开源人才,助力开源生态发展|2023开放原子全球开源峰会校源行分论坛圆满落幕

开放原子开源基金会

开源 开放原子全球开源峰会 开放原子 校源行

AI关于AI民主化的高见

FN0

AIGC

云中巨象——作为一种服务的Hadoop_服务革新_Srini Penchikala_InfoQ精选文章