AICon 上海站|日程100%上线,解锁Al未来! 了解详情
写点什么

Amazon EC2 推出基于 Hadoop 的 MapReduce

  • 2009-04-07
  • 本文字数:718 字

    阅读完需:约 2 分钟

对于如何将流行的 Apache Hadoop MapReduce 框架运行于 Amazon EC2 之上,老早之前就已经有教程了。今天 Amazon 通过 Amazon Elastic MapReduce 对其提供了官方支持,不断改善自身。从其产品页面可看到:

Amazon Elastic MapReduce 自动地在 Amazon EC2 实例上驱动一个 MapReduce 框架的 Hadoop 实现,将任务流中的数据分解为更小的块以用于并行处理 (“map”函数),并最终将处理后的数据重新组合在一起成为最后结果 (“reduce”函数)。Amazon S3 作为被分析的数据源,并作为最终结果输出的目的地。

Amazon Elastic MapReduce 的价格是在现有 EC2 的收费之上的 15% 比率。其 FAQ 上有一个关于价格和使用的完整列表。AWS的官方博客也提供了报道:

…Elastic MapReduce 的处理是围绕着任务流这一概念为中心来开展的。每个任务流包含一步或者多步。第一步从 Amazon S3 输入一定的数据,再将其分配给指定数量的运行 Hadoop 的 EC2 实例 (如果需要的话,驱动这一实例),完成所有的工作,再将结果写回 S3。每个步骤必须参考应用特定的“mapper”和 / 或“reducer”代码 (Java JARS 或是通过流模型使用的脚本代码)。我们同时还包含进了集合包,对一系列诸如和,最小,最大,历史图以及计数等等的公共操作提供了内置的支持。在你开始写代码之前就已经有很多事情搞定了! 我们提供了三种不同的访问 Elaastc MapReduce 的途径。你可以通过 Elastic MapReduce API 获取完全的控制,你也可以使用 Elastic MapRedue 命令行工具,或者在 AWS 管理控制台的 Elastic MapReduce 标签页通过点击进行操作!让我们分别来看每一个…

ZDNet 的 Dana Gardner 推测 这暗示了Amazone 将在商业智能市场推出新的产品。

查看英文原文: Amazon Rolls Out Hadoop Based MapReduce to EC2

2009-04-07 02:103690
用户头像

发布了 133 篇内容, 共 40.0 次阅读, 收获喜欢 1 次。

关注

评论

发布
暂无评论
发现更多内容

议题征集|“智效融合,安全护航”第七期「度安讲」 技术沙龙议题报名!

百度安全

云桌面科普

青椒云云电脑

桌面云 云桌面

电脑卡顿蓝屏?青椒云桌面如何释放硬件压力

青椒云云电脑

云桌面 云桌面厂家 云桌面系统

揭秘JDQ限流架构:实时数据链路的多维动态带宽管控|京东零售技术实践

京东零售技术

数据 JDQ kafla

天润融通创新方案,3分钟掌握引入一线经验至知识库

天润融通

中间件全球数据实时同步利器,华为云EventGrid 事件流重磅发布

YG科技

云桌面系统架构你了解多少?

青椒云云电脑

云桌面 云桌面系统 云桌面技术

云桌面未来发展趋势解读

青椒云云电脑

云桌面

ETL集成工具丨如何运用ETLCloud单步调试断点功能

RestCloud

数据传输 ETL ETL数据集成 断点功能

Swift语言中的Key-Path特性浅析

珲少

比较API架构样式:SOAP与REST与GraphQL与RPC

幂简集成

API graphql soap

华为云软件开发生产线(CodeArts)9月新功能特性

YG科技

Python Faker库造伪数据,使用CSV文件数据管理,faker数据唯一性

测试人

Python 软件测试 faker

云桌面技术特点详细分析

青椒云云电脑

云桌面 云桌面系统

云电脑哪家好用?国产云桌面推荐

青椒云云电脑

云桌面 云电脑 云电脑平台

不同云桌面有哪些应用场景

青椒云云电脑

桌面云 云桌面

云桌面系统的运用优势有哪些?

青椒云云电脑

云桌面 云桌面系统

如何分辨云桌面的基础架构

青椒云云电脑

桌面云 云桌面

鸿蒙座舱:第三空间是一个缤纷多彩的万花筒

脑极体

AI

天润融通突破AI客服局限,三大关键提升文本机器人问答效果

天润融通

为革命保护“视”力 - 注意力插件开发

小学后生

开源 工具 插件 谷歌插件

度小满,让“推理大模型”走向金融核心业务

脑极体

AI

Amazon EC2推出基于Hadoop的MapReduce_Java_Scott Delap_InfoQ精选文章