写点什么

Amazon EC2 推出基于 Hadoop 的 MapReduce

  • 2009-04-07
  • 本文字数:718 字

    阅读完需:约 2 分钟

对于如何将流行的 Apache Hadoop MapReduce 框架运行于 Amazon EC2 之上,老早之前就已经有教程了。今天 Amazon 通过 Amazon Elastic MapReduce 对其提供了官方支持,不断改善自身。从其产品页面可看到:

Amazon Elastic MapReduce 自动地在 Amazon EC2 实例上驱动一个 MapReduce 框架的 Hadoop 实现,将任务流中的数据分解为更小的块以用于并行处理 (“map”函数),并最终将处理后的数据重新组合在一起成为最后结果 (“reduce”函数)。Amazon S3 作为被分析的数据源,并作为最终结果输出的目的地。

Amazon Elastic MapReduce 的价格是在现有 EC2 的收费之上的 15% 比率。其 FAQ 上有一个关于价格和使用的完整列表。AWS的官方博客也提供了报道:

…Elastic MapReduce 的处理是围绕着任务流这一概念为中心来开展的。每个任务流包含一步或者多步。第一步从 Amazon S3 输入一定的数据,再将其分配给指定数量的运行 Hadoop 的 EC2 实例 (如果需要的话,驱动这一实例),完成所有的工作,再将结果写回 S3。每个步骤必须参考应用特定的“mapper”和 / 或“reducer”代码 (Java JARS 或是通过流模型使用的脚本代码)。我们同时还包含进了集合包,对一系列诸如和,最小,最大,历史图以及计数等等的公共操作提供了内置的支持。在你开始写代码之前就已经有很多事情搞定了! 我们提供了三种不同的访问 Elaastc MapReduce 的途径。你可以通过 Elastic MapReduce API 获取完全的控制,你也可以使用 Elastic MapRedue 命令行工具,或者在 AWS 管理控制台的 Elastic MapReduce 标签页通过点击进行操作!让我们分别来看每一个…

ZDNet 的 Dana Gardner 推测 这暗示了Amazone 将在商业智能市场推出新的产品。

查看英文原文: Amazon Rolls Out Hadoop Based MapReduce to EC2

2009-04-07 02:103681
用户头像

发布了 133 篇内容, 共 39.8 次阅读, 收获喜欢 1 次。

关注

评论

发布
暂无评论
发现更多内容

北鲲云超算平台能够为CAE行业发展提供哪些支持?

北鲲云

Prometheus 内置函数(二)

耳东@Erdong

Prometheus PromQL 10月月更

从零开始,基于焱融 SaaS 数据服务平台搭建私有 WordPress blog

焱融科技

云计算 技术 分布式 高性能 文件存储

架构实战营-hw1

WWH

架构实战营

LogUtil日志工具类的封装

Changing Lin

10月月更

Vue进阶(幺肆捌):Vuex 辅助函数详解

No Silver Bullet

Vue 辅助函数 10月月更

在线文本去重统计工具

入门小站

工具

云栖发布|阿里云消息队列 RocketMQ 5.0:消息、事件、流融合处理平台

阿里巴巴中间件

阿里云 RocketMQ 云原生 中间件 云栖大会

nil,看这篇就够了

Rayjun

Go 语言 nil

官方线索|编程技术宇宙——1024挑战活动

Regan Yue

1024我在现场

Go 中如何使用 Interfaces

baiyutang

golang 10月月更

作业六:电商微服务系统设计

紫云

微信对外部搜索引擎开放:自媒体平台开放搜索引擎有哪些意义

石头IT视角

架构训练营第一模块作业

最后的风之子

「架构实战营」

机器人主板需求配置参数有哪些呢?

双赞工控

微信朋友圈的高性能复杂度分析

Beyond Ryan

架构实战营

linux防止文件和目录被意外删除或修改

入门小站

Linux

从华为推出仓颉编程语言引发的对编程语言的思考

轻口味

编程语言 10月月更

带你认识世界上第一个以商业为中心的元宇宙 Highstreet

devpoint

区块链 元宇宙 10月月更

架构实战营 - 模块六作业

Alex.Wu

HarmonyOS 3.0.0开发者预览版全新发布

科技汇

dddd

askuy

管理者如何授权

石云升

职场经验 10月月更

HMS的三年一诺,开放出璀璨星河

脑极体

025云原生之Prometheus介绍

穿过生命散发芬芳

云原生 10月月更

网络安全:SSRF+XXE漏洞挖掘笔记

网络安全学海

网络安全 信息安全 渗透测试 WEB安全 安全漏洞

硝烟弥漫的安全战场,只等一位超级英雄登场

脑极体

聊聊开发日常的效率提升工具(全)

聊一聊利用Dijkstra求有向图的最短路径

Regan Yue

算法 10月月更

Lombok与Guava

风翱

lombok 10月月更

Generic Type Variance in Dart

Think

flutter dart 泛型

Amazon EC2推出基于Hadoop的MapReduce_Java_Scott Delap_InfoQ精选文章