第二天-搭建Hadoop客户端
2018-03-08 21:42
393 查看
记录我的hadoop学习路线,也希望能帮助到正在学习hadoop可爱的亲们!(杰普企业老师指点)其实hadoop的客户端很好搭建,比伪分布还要简单,只需要配置core-site.xml即可就是让另一台主机当主节点,这台主机当客户端,通过9000端口去访问hdfs集群上的文件配置core-site.xml<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://masterip:9000</value>
</property>
</configuration> masterip该填什么呢???
我们回到master主节点:
这里我遇到一个坑,hdfs://192.168.153.129:9000 启动后Namenode节点启动不起来
解决办法:修改/etc/hosts文件
这样就好了!!!唉唉唉。。。
继续slave节点配置:
也修改slave主机hosts文件:192.168.153.129 master修改core-site.xml
弄这么多我们的目的就是,在客户端这台主机能访问master主机hdfs的文件:(那我们来看看)
1.首先启动datanode,namenode节点(jps查看发现只有datanode PS:其实就是这样啦)
2.我们在客户端上传文件到hdfs
到这里又要恭喜你了,哈哈哈哈!
<property>
<name>fs.defaultFS</name>
<value>hdfs://masterip:9000</value>
</property>
</configuration> masterip该填什么呢???
我们回到master主节点:
这里我遇到一个坑,hdfs://192.168.153.129:9000 启动后Namenode节点启动不起来
解决办法:修改/etc/hosts文件
这样就好了!!!唉唉唉。。。
继续slave节点配置:
也修改slave主机hosts文件:192.168.153.129 master修改core-site.xml
弄这么多我们的目的就是,在客户端这台主机能访问master主机hdfs的文件:(那我们来看看)
1.首先启动datanode,namenode节点(jps查看发现只有datanode PS:其实就是这样啦)
2.我们在客户端上传文件到hdfs
到这里又要恭喜你了,哈哈哈哈!
相关文章推荐
- 安卓微博客户端 第二天 系统主框架的搭建
- hadoop-HA集群搭建,启动DataNode,检测启动状态,执行HDFS命令,启动YARN,HDFS权限配置,C++客户端编程,常见错误
- hadoop学习第二天~Hadoop2.6.5完全分布式集群搭建和测试
- hadoop client 客户端模式搭建
- hadoop学习第二天-了解HDFS的基本概念&&分布式集群的搭建&&HDFS基本命令的使用
- Hadoop(五)搭建Hadoop客户端与Java访问HDFS集群
- Hadoop(五)搭建Hadoop客户端与Java访问HDFS集群【转载】
- 搭建Hadoop和Hive客户端
- 搭建Hadoop2.6+Hbase0.98.6+Nutch2.3环境
- 大数据学习系列之六 ----- Hadoop+Spark环境搭建
- docker搭建hadoop分布式集群
- Ubuntu系统下使用Eclipse搭建hadoop2.4运行环境
- docker搭建hadoop分布式集群
- hadoop 搭建集群配置
- 【转】超详细单机版搭建hadoop环境图文解析
- ubuntu搭建hadoop伪分布式环境:jdk1.8.0+hadoop2.8.0+eclipse-jee-neon-3
- Hadoop2.5.2 HA高可靠性集群搭建(Hadoop+Zookeeper)
- Hadoop2.5.2分布式环境搭建
- hadoop搭建之jdk安装
- Hadoop1.2.1集群搭建