shell脚本在容器云中搭建hadoop集群(五)
2017-09-12 23:17
447 查看
总结一下今天的学习过程
1,先说下今天下午以及半个晚上写了上学期的数据库作业,加上之前写的整整写了12页A4纸,总算完成了一门课
2,上午继续调试了昨日未完成的工作,不过还是差一部分没有完成
分模块的测试了各个组件的正确性,暂时算是各个模块成功了吧,主要是从节点的配置,主节点的5个xml文件配置、分发Hadoop文件、格式化HDFS、启动从节点以及主节点容器、并同时设置IP与容器主机名的映射:这里注意:这里只能以-d的方式运行,因为要设置IP与容器主机名的映射,只有先映射完毕后,才能是脚本中的shh、以及秘钥拷贝才能成功,以-i的方式启动则不能实现。
并将其整合到一个脚本文件,删除历史镜像,重新编译,完成一键化启动,可惜失败
启动结果为:主节点启动,jps并有四个进程,可惜的是:两个从节点,一个成功一半,因为启动不了namemanager进程,另一个则无法启动,希望明天能有所进展。
充实的一天,有进步就有希望,明天加油
1,先说下今天下午以及半个晚上写了上学期的数据库作业,加上之前写的整整写了12页A4纸,总算完成了一门课
2,上午继续调试了昨日未完成的工作,不过还是差一部分没有完成
分模块的测试了各个组件的正确性,暂时算是各个模块成功了吧,主要是从节点的配置,主节点的5个xml文件配置、分发Hadoop文件、格式化HDFS、启动从节点以及主节点容器、并同时设置IP与容器主机名的映射:这里注意:这里只能以-d的方式运行,因为要设置IP与容器主机名的映射,只有先映射完毕后,才能是脚本中的shh、以及秘钥拷贝才能成功,以-i的方式启动则不能实现。
并将其整合到一个脚本文件,删除历史镜像,重新编译,完成一键化启动,可惜失败
启动结果为:主节点启动,jps并有四个进程,可惜的是:两个从节点,一个成功一半,因为启动不了namemanager进程,另一个则无法启动,希望明天能有所进展。
充实的一天,有进步就有希望,明天加油
相关文章推荐
- shell脚本在容器云中搭建hadoop集群(六)
- shell脚本在容器云中搭建hadoop集群(七)
- shell脚本在容器云中搭建hadoop集群(四)
- shell脚本在容器云中搭建hadoop集群(二)
- shell脚本在容器云中搭建hadoop集群(一)
- 在linux下使用shell脚本自动化完成hadoop集群搭建
- hadoop MapReduce集群模式调整匹配及shell脚本处理
- hadoop集群机架感应配置的简单过程(shell脚本版本)
- 【甘道夫】Hadoop2.2.0集群启动和停止Shell脚本
- [容器]python搭建简易服务器+docker导入多个镜像shell脚本
- Hadoop概念学习系列之Java调用Shell命令和脚本,致力于hadoop/spark集群(三十六)
- hadoop集群的搭建脚本及构思(N):一个简化的Hadoop+Spark on Yarn集群快速搭建
- 【甘道夫】Hadoop2.2.0集群启动和停止Shell脚本
- 在Docker上使用Weave搭建Hadoop和Spark跨主机容器集群
- 容器云下hadoop集群的搭建
- hadoop完全分布式集群搭建全部流程之四:ssh和脚本补充
- shell脚本搭建容器云(二)
- shell脚本搭建容器云完结篇(三)
- Linux 下 LXD 容器搭建 Hadoop 集群
- 搭建ubuntu14.04的hadoop集群【docker容器充当服务器】