hadoop1.X安装
2016-03-10 17:09
211 查看
1. 配置主机的名称
master,slave1,slave2
2. 安装JDK:
3. 配置IP与主机名称的映射:
192.168.0.100 master
192.168.0.101 slave1
192.168.0.103 slave2
4. 配置ssh免password登陆:
Ssh-keygen –t rsa
5. 解压hadoop的安装文件
6. 改动hadoop-env.sh, core-site.xml, hdfs-site.xml, mapred-site.xml
7. 格式化分布式文件系统:
[hadoop@master hadoop-1.2.1]$bin/hadoop namenode -format
8. 启动守护进程:
[hadoop@master hadoop-1.2.1]$bin/start-all.sh
9. 检測守护进程的启动情况:
[hadoop@master hadoop-1.2.1]$/data/java/jdk1.6.0_13/bin/jps
master:
Slave1:
Slave2:
该命令也能够查看:
[hadoop@master hadoop-1.2.1]$ bin/hadoopdfsadmin -report
http://192.168.0.100:50070/dfshealth.jsp
http://192.168.0.100:50030/jobtracker.jsp
10. 问题:
A.主节点没有NameNode:须要又一次格式化,格式化前必须删除相关tmp文件。
B.从节点的DataNode无法启动,须要查看cat /data/hadoop/hadoop-1.2.1/logs 中的日志,查明无法启动的原因。
WARNorg.apache.hadoop.hdfs.server.datanode.DataNode: Invalid directory indfs.data.dir: Incorrect permission for /data /hadoop/data, expected: rwxr-xr-x,while actual: rwxrwxr-x
该问题的解决方法是chmod 755 /data /hadoop/data。
參考连接:http://www.cnblogs.com/Cilimer/p/3764579.html
有问题百度还是比較靠谱的。能学到好多东西!!
!
master,slave1,slave2
2. 安装JDK:
3. 配置IP与主机名称的映射:
192.168.0.100 master
192.168.0.101 slave1
192.168.0.103 slave2
4. 配置ssh免password登陆:
Ssh-keygen –t rsa
5. 解压hadoop的安装文件
6. 改动hadoop-env.sh, core-site.xml, hdfs-site.xml, mapred-site.xml
7. 格式化分布式文件系统:
[hadoop@master hadoop-1.2.1]$bin/hadoop namenode -format
8. 启动守护进程:
[hadoop@master hadoop-1.2.1]$bin/start-all.sh
9. 检測守护进程的启动情况:
[hadoop@master hadoop-1.2.1]$/data/java/jdk1.6.0_13/bin/jps
master:
Slave1:
Slave2:
该命令也能够查看:
[hadoop@master hadoop-1.2.1]$ bin/hadoopdfsadmin -report
http://192.168.0.100:50070/dfshealth.jsp
http://192.168.0.100:50030/jobtracker.jsp
10. 问题:
A.主节点没有NameNode:须要又一次格式化,格式化前必须删除相关tmp文件。
B.从节点的DataNode无法启动,须要查看cat /data/hadoop/hadoop-1.2.1/logs 中的日志,查明无法启动的原因。
WARNorg.apache.hadoop.hdfs.server.datanode.DataNode: Invalid directory indfs.data.dir: Incorrect permission for /data /hadoop/data, expected: rwxr-xr-x,while actual: rwxrwxr-x
该问题的解决方法是chmod 755 /data /hadoop/data。
參考连接:http://www.cnblogs.com/Cilimer/p/3764579.html
有问题百度还是比較靠谱的。能学到好多东西!!
!
相关文章推荐
- linux-ubuntu之chown和chmod
- Linux命令学习手册-arp命令
- Linux进程间通信——使用消息队列
- Hadoop系列二:Hadoop单节点伪分布部署并执行mapreduce示例wordcount
- [optimization]Dogleg Method狗腿算法
- 嵌入式linux:音频编解码PCM转至AAC
- Apache的安装
- 3. autowire、scope和aware接口
- linux 获取文件系统信息(磁盘信息)
- Apache 启动、停止、重启
- 2.window安装Jenkins和tomcat
- : AH00436: No installed service named "Apache2.4". 错误解决过程记录
- Nginx的安装 Centos
- 在CentOS 6.3 64bit下yum安装MySQL后重置root密码的方法
- 【Linux调试经验】局域网内数据传输不经过路由
- [国嵌攻略][127][tty驱动程序架构]
- 抽样,mcmc, Metropolis-Hastings,Gibbs Sampling
- nginx安装问题 libpcre.so.1解决
- 查看 SELinux状态及关闭SELinux
- Linux中的find命令精华版(你会用到爱不释手)