shell脚本在容器云中搭建hadoop集群(六)
2017-09-13 23:20
411 查看
总结一下今天的学习过程
1,上午继续昨天的问题,继续调试Hadoop集群。启动了namemaneger节点,但是又出现了一个DataNode节点争抢的问题,刚刚启动时,两个DataNode节点进程相关启动正确,但是过几分钟,出现争抢的状况,最后之启动了一个从节点,另一个节点消失了,在web50070界面只看到一个live node节点,不明所以,在网上查了很多资料,也没有找到答案,再加上时间久了,脑袋爆炸,只能暂时搁浅,明天继续了
2,今天下午又接着看了使用sqlalchemy工具对mairadb数据库的链接以及table表数据的增加,并在Django项目中做了测试
安装sqlalchemy :pip install sqlalchemy
获取引擎链接字符串:engine=create_engine("mysql://root:123@localhost:3307/test")
再获取数据库回话等
3,晚上学习了解了一个(对自己来说)新的数据库:MongoDB,看了几本简介以及相应的命令对集合以及文档的操作,插入更新等等
不过可惜的是没有安装成功,现在正在看官方文档,希望能看的懂
美好的一天,明天加油
1,上午继续昨天的问题,继续调试Hadoop集群。启动了namemaneger节点,但是又出现了一个DataNode节点争抢的问题,刚刚启动时,两个DataNode节点进程相关启动正确,但是过几分钟,出现争抢的状况,最后之启动了一个从节点,另一个节点消失了,在web50070界面只看到一个live node节点,不明所以,在网上查了很多资料,也没有找到答案,再加上时间久了,脑袋爆炸,只能暂时搁浅,明天继续了
2,今天下午又接着看了使用sqlalchemy工具对mairadb数据库的链接以及table表数据的增加,并在Django项目中做了测试
安装sqlalchemy :pip install sqlalchemy
获取引擎链接字符串:engine=create_engine("mysql://root:123@localhost:3307/test")
再获取数据库回话等
3,晚上学习了解了一个(对自己来说)新的数据库:MongoDB,看了几本简介以及相应的命令对集合以及文档的操作,插入更新等等
不过可惜的是没有安装成功,现在正在看官方文档,希望能看的懂
美好的一天,明天加油
相关文章推荐
- shell脚本在容器云中搭建hadoop集群(四)
- shell脚本在容器云中搭建hadoop集群(二)
- shell脚本在容器云中搭建hadoop集群(五)
- shell脚本在容器云中搭建hadoop集群(七)
- 在linux下使用shell脚本自动化完成hadoop集群搭建
- shell脚本在容器云中搭建hadoop集群(一)
- 搭建ubuntu14.04的hadoop集群【docker容器充当服务器】
- hadoop集群的搭建脚本及构思(N):一个简化的Hadoop+Spark on Yarn集群快速搭建
- [容器]python搭建简易服务器+docker导入多个镜像shell脚本
- hadoop-yarn集群中,通过shell脚本自动化提交spark任务
- 使用 Shell 脚本进行 Hadoop Spark 集群的批量安装
- hadoop集群的搭建脚本及构思(一):用户和用户权限
- hadoop完全分布式集群搭建全部流程之四:ssh和脚本补充
- hadoop集群及相关服务的启动、停止shell脚本
- 一键启动hadoop集群、zookeeper集群、spark集群shell脚本
- hadoop MapReduce集群模式调整匹配及shell脚本处理
- Hadoop概念学习系列之Java调用Shell命令和脚本,致力于hadoop/spark集群(三十六)
- shell 脚本实战笔记(7)--集群网络相关知识和环境搭建
- hadoop集群一键自动启动和自动关闭shell脚本 原创 2017年07月23日 17:58:45
- 容器云下hadoop集群的搭建