写点什么

Amazon EC2 推出基于 Hadoop 的 MapReduce

  • 2009-04-07
  • 本文字数:718 字

    阅读完需:约 2 分钟

对于如何将流行的 Apache Hadoop MapReduce 框架运行于 Amazon EC2 之上,老早之前就已经有教程了。今天 Amazon 通过 Amazon Elastic MapReduce 对其提供了官方支持,不断改善自身。从其产品页面可看到:

Amazon Elastic MapReduce 自动地在 Amazon EC2 实例上驱动一个 MapReduce 框架的 Hadoop 实现,将任务流中的数据分解为更小的块以用于并行处理 (“map”函数),并最终将处理后的数据重新组合在一起成为最后结果 (“reduce”函数)。Amazon S3 作为被分析的数据源,并作为最终结果输出的目的地。

Amazon Elastic MapReduce 的价格是在现有 EC2 的收费之上的 15% 比率。其 FAQ 上有一个关于价格和使用的完整列表。AWS的官方博客也提供了报道:

…Elastic MapReduce 的处理是围绕着任务流这一概念为中心来开展的。每个任务流包含一步或者多步。第一步从 Amazon S3 输入一定的数据,再将其分配给指定数量的运行 Hadoop 的 EC2 实例 (如果需要的话,驱动这一实例),完成所有的工作,再将结果写回 S3。每个步骤必须参考应用特定的“mapper”和 / 或“reducer”代码 (Java JARS 或是通过流模型使用的脚本代码)。我们同时还包含进了集合包,对一系列诸如和,最小,最大,历史图以及计数等等的公共操作提供了内置的支持。在你开始写代码之前就已经有很多事情搞定了! 我们提供了三种不同的访问 Elaastc MapReduce 的途径。你可以通过 Elastic MapReduce API 获取完全的控制,你也可以使用 Elastic MapRedue 命令行工具,或者在 AWS 管理控制台的 Elastic MapReduce 标签页通过点击进行操作!让我们分别来看每一个…

ZDNet 的 Dana Gardner 推测 这暗示了Amazone 将在商业智能市场推出新的产品。

查看英文原文: Amazon Rolls Out Hadoop Based MapReduce to EC2

2009-04-07 02:103651
用户头像

发布了 133 篇内容, 共 39.3 次阅读, 收获喜欢 1 次。

关注

评论

发布
暂无评论
发现更多内容

前OpenAI首席技术官为新AI初创公司筹资;我国发布首个应用临床眼科大模型 “伏羲慧眼”|AI日报

可信AI进展

最佳 Mac 网站创建器:RapidWeaver 9

Rose

DaVinci Resolve v19.0.3激活版 达芬奇mac版安装教程

Rose

溯源管理系统(源码+文档+部署+讲解)

深圳亥时科技

Fig Player - play mp4 mkv mp3:高清媒体播放器

Rose

ByteHouse直播预告:揭秘基于OLAP降本增效的四大硬招

字节跳动数据平台

大数据 活动

Topaz Gigapixel AI 8.0.0:更大更清晰更真实,将任何图像放大 16 倍并增强

Rose

Adobe Premiere Pro 2025(PR2025) 直装版

你的猪会飞吗

pr2025下载 pr2025软件

数字身份管理面临的多方挑战

芯盾时代

数字身份 身份安全 身份管理

简体中文版excel2019-正版激活-永久使用

Rose

diskdrill激活码分享 优秀的数据恢复工具

Rose

LED全彩显示屏的9大优点

Dylan

广告 LED display LED显示屏 市场 体育

深入探讨 TDengine S3:让你的数据管理更轻松

TDengine

数据库 时序数据库 #TDengine

数据集成进化论:从传统 ETL 到数据编织的跨越

Aloudata

VMware vCenter Server 7.0U3t 发布下载,修复堆溢出漏洞 (CVE-2024-38812) 和权限提升漏洞 (CVE-2024-38813)

sysin

vmware vcenter esxi

VMware vCenter Server 8.0U3d 发布下载,修复堆溢出漏洞 (CVE-2024-38812) 和权限提升漏洞 (CVE-2024-38813)

sysin

vSphere vcenter esxi

场地预约系统(源码+文档+部署+讲解)

深圳亥时科技

灵活用工招聘平台(源码+文档+部署+讲解)

深圳亥时科技

TDengine 与新奥新智达成合作,支撑海量设备、亿级数据

TDengine

数据库 tdengine 时序数据库

CST电磁仿真——如何合并两个模型并保持参数化

思茂信息

教程 cst 电磁仿真

无人机管理系统(源码+文档+部署+讲解)

深圳亥时科技

品讯HRO系统(源码+文档+部署+讲解)

深圳亥时科技

企业级 RAG 全链路优化关键技术

阿里云大数据AI技术

阿里云 云栖大会 rag AI搜索

里程碑丨Milvus在GitHub上的Stars数量突破30,000!

Zilliz

开源 Milvus Zilliz 向量数据库

ClickHouse在百度MEG数据中台的落地和优化

百度Geek说

数仓引擎;ClickHouse;

VMware vCenter Server 8.0U2e 发布下载,修复堆溢出漏洞 (CVE-2024-38812) 和权限提升漏洞 (CVE-2024-38813)

sysin

vSphere vcenter esxi

EndNote 21授权密钥2024最新 EndNote 21下载安装包

Rose

AI语音模型在家宽业务中的应用

鲸品堂

企业号 2024年10月PK榜

Exploring Qualcomm IPQ5332 and IPQ5322: The Champions of WiFi 7 Solutions

wifi6-yiyi

5G WiFi7 6G 10G IPQ5332

Screaming Frog SEO Spider:网站爬虫及SEO审计工具

Rose

Autodesk AutoCAD 2025 简体中文版下载【Mac/win】

Rose

Amazon EC2推出基于Hadoop的MapReduce_Java_Scott Delap_InfoQ精选文章