2天时间,聊今年最热的 Agent、上下文工程、AI 产品创新等话题。2025 年最后一场~ 了解详情
写点什么

Amazon EC2 推出基于 Hadoop 的 MapReduce

  • 2009-04-07
  • 本文字数:718 字

    阅读完需:约 2 分钟

对于如何将流行的 Apache Hadoop MapReduce 框架运行于 Amazon EC2 之上,老早之前就已经有教程了。今天 Amazon 通过 Amazon Elastic MapReduce 对其提供了官方支持,不断改善自身。从其产品页面可看到:

Amazon Elastic MapReduce 自动地在 Amazon EC2 实例上驱动一个 MapReduce 框架的 Hadoop 实现,将任务流中的数据分解为更小的块以用于并行处理 (“map”函数),并最终将处理后的数据重新组合在一起成为最后结果 (“reduce”函数)。Amazon S3 作为被分析的数据源,并作为最终结果输出的目的地。

Amazon Elastic MapReduce 的价格是在现有 EC2 的收费之上的 15% 比率。其 FAQ 上有一个关于价格和使用的完整列表。AWS的官方博客也提供了报道:

…Elastic MapReduce 的处理是围绕着任务流这一概念为中心来开展的。每个任务流包含一步或者多步。第一步从 Amazon S3 输入一定的数据,再将其分配给指定数量的运行 Hadoop 的 EC2 实例 (如果需要的话,驱动这一实例),完成所有的工作,再将结果写回 S3。每个步骤必须参考应用特定的“mapper”和 / 或“reducer”代码 (Java JARS 或是通过流模型使用的脚本代码)。我们同时还包含进了集合包,对一系列诸如和,最小,最大,历史图以及计数等等的公共操作提供了内置的支持。在你开始写代码之前就已经有很多事情搞定了! 我们提供了三种不同的访问 Elaastc MapReduce 的途径。你可以通过 Elastic MapReduce API 获取完全的控制,你也可以使用 Elastic MapRedue 命令行工具,或者在 AWS 管理控制台的 Elastic MapReduce 标签页通过点击进行操作!让我们分别来看每一个…

ZDNet 的 Dana Gardner 推测 这暗示了Amazone 将在商业智能市场推出新的产品。

查看英文原文: Amazon Rolls Out Hadoop Based MapReduce to EC2

2009-04-07 02:103942
用户头像

发布了 133 篇内容, 共 43.9 次阅读, 收获喜欢 1 次。

关注

评论

发布
暂无评论
发现更多内容

Golang 函数式编程基础

俞凡

golang

超强系统优化工具MacPilot for Mac激活版

小玖_苹果Mac软件

超强全能工具箱Parallels Toolbox for Mac激活版

小玖_苹果Mac软件

唯品会按关键字搜索 VIP 商品 API 接口的开发应用与收益

科普小能手

数据挖掘 数据分析 API 文档 唯品会API接口 跨境电商运营

IK Multimedia T-RackS 6 MAX:功能全面、性能卓越的混音和母带处理软件

Rose

illustrator 2022(ai2022) 绿色便携版+ai2022 mac破解版

Rose

从 UUID 到 UUIDv7:唯一标识符的演进

俞凡

分布式系统

解决Ascend上vllm运行时出现urllib3.exceptions.SSLError: [SSL: CERTIFICATE_VERIFY_FAILED]

zjun

系统垃圾清理软件MacCleanse for Mac激活版

小玖_苹果Mac软件

5分钟了解 Golang 的快速编译

俞凡

golang

Mirror for Android TV for Mac(屏幕和声音镜像到Android TV的工具)v2.8.3激活版

Rose

Permute 3 Mac中文版:轻松将您的媒体文件转换为各种不同的格式

Rose

SpringCloud 应用 Nacos 配置中心注解

阿里巴巴云原生

阿里云 云原生

JVM实战—OOM的原因和模拟以及案例

不在线第一只蜗牛

Python JVM

去哪儿Kube DNS架构优化

Qunar技术沙龙

后端 优化 DNS 后端技术

CAD通过可变块创建不同尺寸零件的方法

极客天地

网络电视客户端 EyeTV for mac注册版 4.0.0

Rose

photoshop2022安装教程及ps2022激活补丁-Mac&win

Rose

如何用一张二维码展示图文并茂的产品画册?内附详细制作教程!

草料二维码

二维码 草料二维码 产品画册 产品二维码 电子图册

FoneDog iPhone Cleaner for Mac(ios系统清理工具)激活版

Rose

智算云领导者!

天翼云开发者社区

云计算 天翼云

DeepSeek v3为何爆火?如何用其集成Milvus搭建RAG?

Zilliz

Milvus 大模型 rag DeepSeek v3

罗永浩 AI 智能助理 J1 Assistant 上线;字节开源 LatentSync ,精准控制唇形同步丨 RTE 开发者日报

声网

WIFI网络扫描工具AirRadar for Mac 激活版

小玖_苹果Mac软件

利用GPU Operator快速构建Kubernetes中的GPU加速环境

代码忍者

经典游戏: 仙剑奇侠传98柔情篇中文移植版Mac游戏下载

Rose

跨越鸿沟:PAI-DSW 支持动态数据挂载新体验

阿里云大数据AI技术

人工智能 Fluid PAI DSW 动态挂载

Amazon EC2推出基于Hadoop的MapReduce_Java_Scott Delap_InfoQ精选文章