写点什么

Hadoop 任务即将可以运行在 Docker 容器中

  • 2014-09-03
  • 本文字数:689 字

    阅读完需:约 2 分钟

近日, Gigaom 高级编辑 Derrick Harris 发表了一篇文章,题为《 Hadoop 任务即将可以简单又安全地运行在 Docker 容器中》。文章开头写到,Hadoop 初创企业 Altiscale 将把 Docker 变成运行 Hadoop 任务的一个合适环境作为自己的使命,而且已经接近完成。现在,其中最大一项待解决的问题是网络安全。

Raymie Stata 是前雅虎 CTO,同时也是 Artiscale 这家 Hadoop 即服务初创企业的创始成员之一。他和另一位工程师Dinesh Subhraveti 向Harris 介绍了他们的这项工作。

据Stata 介绍,他们正与Docker 社区紧密合作,推动 Docker 与 YARN 集成。他认为,这对任何需要应对多租户 Hadoop 环境的企业而言都很重要。Docker 不仅可以提供一种快速、标准的方法向 YARN 部署应用程序,还可以实现应用程序之间的隔离。这在安全和性能方面都很重要。下面是 Docker 容器运行应用程序的示意图:

不过,Subhraveti 指出,在实现 Docker 与 YARN 的集成之前,需要完成一项重大的改进,就是将用户命名空间引入Docker ,从而确保具有root 级权限的应用程序不会危害主机,使它不安全或者降低其它容器的性能。这项工作可能要到今年年底才能完成,到那时候,Hadoop 用户应该就能够在YARN 上运行Docker 容器,并且不用担心安全问题了。

最近一段时间,关于Docker 的讨论比较多。对Docker 感兴趣的读者,可以阅读一下Gigaom 前段时间发表的另一篇文章《 Docker 如何抓住开源的理想时机成为云端的宠儿》。


感谢郭蕾对本文的审校。

给InfoQ 中文站投稿或者参与内容翻译工作,请邮件至 editors@cn.infoq.com 。也欢迎大家通过新浪微博( @InfoQ )或者腾讯微博( @InfoQ )关注我们,并与我们的编辑和其他读者朋友交流。

2014-09-03 06:314531
用户头像

发布了 256 篇内容, 共 86.3 次阅读, 收获喜欢 12 次。

关注

评论

发布
暂无评论
发现更多内容

知识管理的目的及意义——提高社会资源的配置效率

小炮

知识管理

hyengine - 面向移动端的高性能通用编译/解释引擎

阿里巴巴终端技术

编译 移动端 引擎

JS/TS项目里的Module都是什么?

华为云开发者联盟

js Module loaders bundlers

在线字节转换工具

入门小站

工具

IoTDB 服务绍兴安瑞思90%业务,助其提升百倍查询速度

Apache IoTDB

从容器化到资源池化,数栈云原生技术实践探索之路

袋鼠云数栈

大数据 flink 云原生 k8s

一文带你使用 Apache IoTDB 系统监控模块

Apache IoTDB

易观分析:三大协会发声NFT,未来监管走向几何?

易观分析

区块链 NFT

这款神器大大提升了协作效率!

Liam

后端 Jmeter Postman swagger Mock

linux之iconv命令

入门小站

Linux

程序员=沉闷无趣?都是刻板印象…

LigaAI

程序员人生 程序猿

同事删库跑路后,我连表名都不能修改了?

码农参上

数据库 数据恢复 权限 删库 4月月更

博睿数据入选首批欧拉技术测评方案,为欧拉生态开发者应用体验保驾护航

博睿数据

16 张图 | Nacos 架构原理①:一条注册请求会经历什么?

悟空聊架构

nacos 注册中心 4月日更 悟空聊架构 4月月更

14年软件开发经历IT:低代码已成为企业管理的核心引擎

一只大光圈

钉钉 低代码 IT 数字化 钉钉宜搭

Prime Video 如何使用机器学习来确保视频质量

亚马逊云科技 (Amazon Web Services)

计算机视觉 Amazon Prime Video WACV

让我们开始使用 Amazon Lambda

亚马逊云科技 (Amazon Web Services)

Serverless 云原生 亚马逊云科技 云技能

2022年全新FFmpeg/WebRTC/RTMP/RTSP/HLS/RTP播放器-音视频流媒体高级开发学习大纲

赖猫

音视频开发 音视频技术

Docker 实战教程之从入门到提高 (五)

汪子熙

Docker 容器 虚拟化 容器镜像 4月月更

3月券商App行情刷新及交易体验评测报告,国泰君安再夺领导者冠军

博睿数据

虎符研究院|币圈后浪MetaAds——现实与元宇宙的展示平台

区块链前沿News

虎符交易所

Tiger DAO VC:将你的风险投资变成DAO组织协同

BlockChain先知

五大应用示范,为社区/企业防疫管理减负提效

明道云

QIP 25周年

亚马逊云科技 (Amazon Web Services)

量子计算 量子技术 量子纠错

一文读懂 TsFile

Apache IoTDB

5. 堪比JMeter的.Net压测工具 - Crank 实战篇 - 接口以及场景压测

MASA技术团队

C# .net 微软 测试 压测

在线CSV转SQL工具

入门小站

工具

揭露sealer背后实现整个集群一键交付的奥秘 | 龙蜥技术

OpenAnolis小助手

开源 sealer 龙蜥技术 镜像集群

审核和审批的区别

秋去冬来春未远

TASKCTL ETL作业类型的插件与维护管理

敏捷调度TASKCTL

kettle 元数据 ETL 自动化运维 调度任务

社区动态|Apache Doris 迎来第 300 位 Contributor !

ApacheDoris

大数据 开源 OLAP MPP apache doris

Hadoop任务即将可以运行在Docker容器中_语言 & 开发_马德奎_InfoQ精选文章