2天时间,聊今年最热的 Agent、上下文工程、AI 产品创新等话题。2025 年最后一场~ 了解详情
写点什么

Amazon EC2 推出基于 Hadoop 的 MapReduce

  • 2009-04-07
  • 本文字数:718 字

    阅读完需:约 2 分钟

对于如何将流行的 Apache Hadoop MapReduce 框架运行于 Amazon EC2 之上,老早之前就已经有教程了。今天 Amazon 通过 Amazon Elastic MapReduce 对其提供了官方支持,不断改善自身。从其产品页面可看到:

Amazon Elastic MapReduce 自动地在 Amazon EC2 实例上驱动一个 MapReduce 框架的 Hadoop 实现,将任务流中的数据分解为更小的块以用于并行处理 (“map”函数),并最终将处理后的数据重新组合在一起成为最后结果 (“reduce”函数)。Amazon S3 作为被分析的数据源,并作为最终结果输出的目的地。

Amazon Elastic MapReduce 的价格是在现有 EC2 的收费之上的 15% 比率。其 FAQ 上有一个关于价格和使用的完整列表。AWS的官方博客也提供了报道:

…Elastic MapReduce 的处理是围绕着任务流这一概念为中心来开展的。每个任务流包含一步或者多步。第一步从 Amazon S3 输入一定的数据,再将其分配给指定数量的运行 Hadoop 的 EC2 实例 (如果需要的话,驱动这一实例),完成所有的工作,再将结果写回 S3。每个步骤必须参考应用特定的“mapper”和 / 或“reducer”代码 (Java JARS 或是通过流模型使用的脚本代码)。我们同时还包含进了集合包,对一系列诸如和,最小,最大,历史图以及计数等等的公共操作提供了内置的支持。在你开始写代码之前就已经有很多事情搞定了! 我们提供了三种不同的访问 Elaastc MapReduce 的途径。你可以通过 Elastic MapReduce API 获取完全的控制,你也可以使用 Elastic MapRedue 命令行工具,或者在 AWS 管理控制台的 Elastic MapReduce 标签页通过点击进行操作!让我们分别来看每一个…

ZDNet 的 Dana Gardner 推测 这暗示了Amazone 将在商业智能市场推出新的产品。

查看英文原文: Amazon Rolls Out Hadoop Based MapReduce to EC2

2009-04-07 02:103934
用户头像

发布了 133 篇内容, 共 43.8 次阅读, 收获喜欢 1 次。

关注

评论

发布
暂无评论
发现更多内容

Java开发框架Struts相关知识分享

@零度

struts JAVA开发

元气部落盲盒芒趣一番赏盲盒app开发搭建

风行无疆

前端开发JS框架之jQuery的基础知识分享

@零度

大前端 ​jQuery

更好用的Web端H265播放技术架构

百度开发者中心

智能视频

2021年财经中国年会暨第十九届中国财经风云榜

大咖说

直播 财经 财经峰会

【量化】资产组合理论:鸡蛋不能放在一个篮子里

恒生LIGHT云社区

量化投资 量化

字节码引用检测原理与实战

vivo互联网技术

编程语言 字节码编程 引用

关于RocketMQ事务方面Demo

企业管理升级,如何加速信息化转型?

雯雯写代码

企业管理 信息化

ios技术分享| iOS 发布 framework 到 Cocoapods 以及常见问题

anyRTC开发者

ios 音视频 WebRTC CocoaPods Framework

给弟弟的信第5封|从高中到大学的体会

大菠萝

28天写作

高并发线下沙龙不容错过!

Qunar技术沙龙

高并发

详解布隆过滤器的原理和实现

万俊峰Kevin

golang 微服务 微服务架构 布隆过滤器 go-zero

聊聊Java底层那些事

码农参上

内容合集 签约计划第二季 技术专题合集 技术专区合集

kubernetes系列随笔03:kubernetes的发展和设计思想

Geek_cd6rkj

Docker Kubernetes 声明式

Android C++系列:Linux线程(四)线程同步

轻口味

android 28天写作 12月日更

WebView秒开方案探索

得物技术

CSS JavaScript html webview 大前端

提高儿童被拐意识

Tiger

28天写作

百度文库新一代文档阅读器!核心技术点全解析!

百度Geek说

大前端 文档 百度文库

【Promise 源码学习】第十四篇 - 实现工具方法 promisify

Brave

源码 Promise 12月日更

直播预告丨“Hello Ability:从页面跳转开始”周三晚不见不散

HarmonyOS开发者

HarmonyOS

喜报 | 旺链科技获批张江国家自主创新示范区专项发展资金!

旺链科技

区块链 数字经济 产业区块链

测试 —— DevOps 快速交付的最大瓶颈

飞算JavaAI开发助手

信息网络向价值网络演进过程中产品形态的思考

拍乐云Pano

Tapdata Cloud 版本上新!新增ClickHouse,ADB MySQL等5个数据源支持

tapdata

MySQL oracle

数据库事务与事务隔离级别

编程江湖

数据库 java编程

对话中国人寿:DevOps实践经验分享

龙智—DevSecOps解决方案

DevOps 中国人寿

华云大咖说 | 华云校园信创云解决方案

华云数据

华云数据

鸿蒙智联设备开发,这五大法宝你应该拥有|HDC2021技术分论坛

HarmonyOS开发者

HarmonyOS

大数据开发之Kafka 存储选型

@零度

大数据 kafka

Amazon EC2推出基于Hadoop的MapReduce_Java_Scott Delap_InfoQ精选文章