写点什么

Hadoop 任务即将可以运行在 Docker 容器中

  • 2014-09-03
  • 本文字数:689 字

    阅读完需:约 2 分钟

近日, Gigaom 高级编辑 Derrick Harris 发表了一篇文章,题为《 Hadoop 任务即将可以简单又安全地运行在 Docker 容器中》。文章开头写到,Hadoop 初创企业 Altiscale 将把 Docker 变成运行 Hadoop 任务的一个合适环境作为自己的使命,而且已经接近完成。现在,其中最大一项待解决的问题是网络安全。

Raymie Stata 是前雅虎 CTO,同时也是 Artiscale 这家 Hadoop 即服务初创企业的创始成员之一。他和另一位工程师Dinesh Subhraveti 向Harris 介绍了他们的这项工作。

据Stata 介绍,他们正与Docker 社区紧密合作,推动 Docker 与 YARN 集成。他认为,这对任何需要应对多租户 Hadoop 环境的企业而言都很重要。Docker 不仅可以提供一种快速、标准的方法向 YARN 部署应用程序,还可以实现应用程序之间的隔离。这在安全和性能方面都很重要。下面是 Docker 容器运行应用程序的示意图:

不过,Subhraveti 指出,在实现 Docker 与 YARN 的集成之前,需要完成一项重大的改进,就是将用户命名空间引入Docker ,从而确保具有root 级权限的应用程序不会危害主机,使它不安全或者降低其它容器的性能。这项工作可能要到今年年底才能完成,到那时候,Hadoop 用户应该就能够在YARN 上运行Docker 容器,并且不用担心安全问题了。

最近一段时间,关于Docker 的讨论比较多。对Docker 感兴趣的读者,可以阅读一下Gigaom 前段时间发表的另一篇文章《 Docker 如何抓住开源的理想时机成为云端的宠儿》。


感谢郭蕾对本文的审校。

给InfoQ 中文站投稿或者参与内容翻译工作,请邮件至 editors@cn.infoq.com 。也欢迎大家通过新浪微博( @InfoQ )或者腾讯微博( @InfoQ )关注我们,并与我们的编辑和其他读者朋友交流。

2014-09-03 06:314972
用户头像

发布了 256 篇内容, 共 99.6 次阅读, 收获喜欢 12 次。

关注

评论

发布
暂无评论
发现更多内容

开源一夏 | layui时间控件 laydate 重置失效

六月的雨在InfoQ

开源 layui 8月月更 laydate

开源技术交流丨ChengYing部署Hadoop集群实战

袋鼠云数栈

想要精准营销,从学习搭建一套对的标签体系开始丨DTVision分析洞察篇

袋鼠云数栈

实时开发平台建设实践,深入释放实时数据价值丨04期直播回顾

袋鼠云数栈

基于开源流批一体数据同步引擎ChunJun数据还原—DDL解析模块的实战分享

袋鼠云数栈

大数据开源项目,一站式全自动化全生命周期运维管家ChengYing(承影)走向何方?

袋鼠云数栈

当我们在聊「开源大数据调度系统Taier」的数据开发功能时,到底在讨论什么?

袋鼠云数栈

开源项目丨Taier1.2版本发布,新增工作流、租户绑定简化等多项功能

袋鼠云数栈

如何在BI中增加“路线地图”并进行数据分析?

葡萄城技术团队

用 manim 写一个排序算法动画

ooooooh灰灰

算法 前端 后端 动画 排序

数据资产为王,解析企业数字化转型与数据资产管理的关系

袋鼠云数栈

流批一体开源项目ChunJun技术公开课——ChunJun同步Hive事务表

袋鼠云数栈

开源大数据调度系统Taier技术公开课——Taier数据开发介绍

袋鼠云数栈

开源交流丨批流一体数据集成工具ChunJun同步Hive事务表原理详解及实战分享

袋鼠云数栈

开源项目丨一文详解一站式大数据平台运维管家ChengYing如何部署Hadoop集群

袋鼠云数栈

跨平台|融云 React Native IM SDK 全新改版上线

融云 RongCloud

IM sdk

数据资产为王,如何解析企业数字化转型与数据资产管理的关系?

袋鼠云数栈

自动化测试-存储测试用例,哪个更好

和牛

Python 自动化 测试 8月月更

从洞察到决策,一文解读标签画像体系建设方法论丨DTVision分析洞察篇

袋鼠云数栈

1分钟创建3000台云电脑 阿里云无影发布多款千人协同生产力方案

Lily

2022年了,你还不会手撕轮播图?

知心宝贝

JavaScript 算法 前端 可视化 签约计划第三季

基于开源大数据调度系统Taier的Web前端架构选型及技术实践

袋鼠云数栈

DataOps不是工具,而是帮助企业实现数据价值的最佳实践

袋鼠云数栈

袋鼠云申杭:数雁EasyDigit,致力成为金融行业数据洞察平台供应商的“领头雁”

袋鼠云数栈

走好数据中台最后一公里,为什么说数据服务API是数据中台的标配?

袋鼠云数栈

开源技术交流丨一站式全自动化运维管家ChengYing入门介绍

袋鼠云数栈

袋鼠云思枢:数驹DTengine,助力企业构建高效的流批一体数据湖计算平台

袋鼠云数栈

【接入指南 之 云云接入】快速接入HONOR Connect平台(下)

荣耀开发者服务平台

开发者 IoT 新手指南 荣耀 honor

开源技术交流丨批流一体数据同步引擎ChunJun数据还原-DDL功能模块解析

袋鼠云数栈

老忘记带伞,自己动手做一个雨天提醒打伞小工具

华为云开发者联盟

云计算 开发 aPaaS

“阿里爸爸”最新总结的303页Spring全家桶高级笔记,都是面试必问的知识点

Java工程师

Java spring Spring全家桶

Hadoop任务即将可以运行在Docker容器中_语言 & 开发_马德奎_InfoQ精选文章