PCon全球产品创新大会开幕在即,查看大会全部精彩内容这里直达 了解详情
写点什么

Amazon EC2 推出基于 Hadoop 的 MapReduce

  • 2009 年 4 月 07 日
  • 本文字数:718 字

    阅读完需:约 2 分钟

对于如何将流行的 Apache Hadoop MapReduce 框架运行于 Amazon EC2 之上,老早之前就已经有教程了。今天 Amazon 通过 Amazon Elastic MapReduce 对其提供了官方支持,不断改善自身。从其产品页面可看到:

Amazon Elastic MapReduce 自动地在 Amazon EC2 实例上驱动一个 MapReduce 框架的 Hadoop 实现,将任务流中的数据分解为更小的块以用于并行处理 (“map”函数),并最终将处理后的数据重新组合在一起成为最后结果 (“reduce”函数)。Amazon S3 作为被分析的数据源,并作为最终结果输出的目的地。

Amazon Elastic MapReduce 的价格是在现有 EC2 的收费之上的 15% 比率。其 FAQ 上有一个关于价格和使用的完整列表。AWS的官方博客也提供了报道:

…Elastic MapReduce 的处理是围绕着任务流这一概念为中心来开展的。每个任务流包含一步或者多步。第一步从 Amazon S3 输入一定的数据,再将其分配给指定数量的运行 Hadoop 的 EC2 实例 (如果需要的话,驱动这一实例),完成所有的工作,再将结果写回 S3。每个步骤必须参考应用特定的“mapper”和 / 或“reducer”代码 (Java JARS 或是通过流模型使用的脚本代码)。我们同时还包含进了集合包,对一系列诸如和,最小,最大,历史图以及计数等等的公共操作提供了内置的支持。在你开始写代码之前就已经有很多事情搞定了! 我们提供了三种不同的访问 Elaastc MapReduce 的途径。你可以通过 Elastic MapReduce API 获取完全的控制,你也可以使用 Elastic MapRedue 命令行工具,或者在 AWS 管理控制台的 Elastic MapReduce 标签页通过点击进行操作!让我们分别来看每一个…

ZDNet 的 Dana Gardner 推测 这暗示了Amazone 将在商业智能市场推出新的产品。

查看英文原文: Amazon Rolls Out Hadoop Based MapReduce to EC2

2009 年 4 月 07 日 02:103236
用户头像

发布了 133 篇内容, 共 30.3 次阅读, 收获喜欢 1 次。

关注

评论

发布
暂无评论
发现更多内容

在线中文繁简体转换工具

入门小站

工具

Apache APISIX 2.10.0 正式发布,带来第一个 LTS 版本!

Apache APISIX 中国社区

开源 API网关 APISIX Apache APISIX

官方线索|2021 长沙·中国 1024 程序员节

穿过生命散发芬芳

1024我在现场

不了解Zookeeper的童鞋看过来哦~

Regan Yue

zookeeper 10月日更

我与消息队列的八年情缘

勇哥java实战分享

RocketMQ 消息队列 Activemq

Android开发中遇到加载有相同函数的so库时的问题

轻口味

10月日更

《第4章 复合类型》

IT蜗壳-Tango

10月日更

官方线索|鸿蒙1024程序员节

轻口味

1024我在现场

【Flutter 专题】27 图解 ListView/GridView 混用时滑动冲突小尝试

阿策小和尚

Flutter 小菜 0 基础学习 Flutter Android 小菜鸟 10月日更

这篇博客和你唠唠 python 并发,滚雪球学python第四季,第16篇

梦想橡皮擦

10月日更

官方线索|【云+社区】程序员过节指南:如何玩转你的1024 ?

Regan Yue

1024 1024我在现场

官方线索|Gitee2021程序员节特别活动

穿过生命散发芬芳

1024我在现场

Java常用容器笔记

六维

java 10月日更

网站性能优化的实战指南

devpoint

html 性能优化 10月日更

官方线索|CCF CED 中国工程师文化日

穿过生命散发芬芳

1024我在现场

技术人在职场应该知道的沟通技巧

baiyutang

沟通模型 10月日更

官方线索|第二届1024国际智能投研开发者大会

穿过生命散发芬芳

1024我在现场

基于分布式认知工业互联网的汽车零部件质量溯源平台

CECBC

线程池处理批量接口请求实践

FunTester

线程池 性能测试 接口测试 测试框架 FunTester

数字货币已被世界公认,中国市场即将爆发

CECBC

和12岁小同志搞创客开发:如何驱动红外遥控器?

不脱发的程序猿

少儿编程 DIY 红外遥控器 创客开发

Apache APISIX 社区周报 | 2021 10.1-10.14

Apache APISIX 中国社区

开源社区 API网关 APISIX 社区周报 Apache APISIX

从转移工具到移动急救室,5G救护车给行业带来了什么变化?

脑极体

SQL注入进阶篇一php代码审计

网络安全学海

网络安全 信息安全 渗透测试 WEB安全 漏洞挖掘

官方线索|2021 长沙·中国 1024 程序员节

耳东@Erdong

10月日更 1024我在现场

官方线索|RTE2021 实时互联网大会

穿过生命散发芬芳

1024我在现场

竞跑加速! 数字人民币场景全覆盖

CECBC

架构:微内核架构(Microkernel Architecture)二

程序员架构进阶

架构 规则引擎 10月日更 微内核架构 OSGi

linux之sed使用技巧

入门小站

Linux

Golang网络编程

CodeWithBuff

golang 网络编程 Go 语言 web socket

北鲲云超算如何让仿真技术、HPC和人工智能之间的深度融合?

北鲲云

IM即时消息系统在荔枝的落地实践

IM即时消息系统在荔枝的落地实践

Amazon EC2推出基于Hadoop的MapReduce_Java_Scott Delap_InfoQ精选文章