Hadoop任务即将可以运行在Docker容器中

作者 马德奎 发布于
2014年9月3日 |

近日，Gigaom高级编辑Derrick Harris发表了一篇文章，题为《Hadoop任务即将可以简单又安全地运行在Docker容器中》。文章开头写到，Hadoop初创企业Altiscale将把Docker变成运行Hadoop任务的一个合适环境作为自己的使命，而且已经接近完成。现在，其中最大一项待解决的问题是网络安全。

Raymie Stata是前雅虎CTO，同时也是Artiscale这家Hadoop即服务初创企业的创始成员之一。他和另一位工程师Dinesh
Subhraveti向Harris介绍了他们的这项工作。

据Stata介绍，他们正与Docker社区紧密合作，推动Docker与YARN集成。他认为，这对任何需要应对多租户Hadoop环境的企业而言都很重要。Docker不仅可以提供一种快速、标准的方法向YARN部署应用程序，还可以实现应用程序之间的隔离。这在安全和性能方面都很重要。下面是Docker容器运行应用程序的示意图：



不过，Subhraveti指出，在实现Docker与YARN的集成之前，需要完成一项重大的改进，就是将用户命名空间引入Docker，从而确保具有root级权限的应用程序不会危害主机，使它不安全或者降低其它容器的性能。这项工作可能要到今年年底才能完成，到那时候，Hadoop用户应该就能够在YARN上运行Docker容器，并且不用担心安全问题了。

最近一段时间，关于Docker的讨论比较多。对Docker感兴趣的读者，可以阅读一下Gigaom前段时间发表的另一篇文章《Docker如何抓住开源的理想时机成为云端的宠儿》。