您的位置:首页 > 运维架构

Hadoop安装记录(伪分布式)

2016-03-13 20:19 274 查看
下面给大家分享一下我在安装Hadoop时候的一些步骤记录,希望能给大家带来帮助,我安装的是单节点的伪分布式。

1.基本环境:VMware8.0 + CentOS 6.0

  2.软件版本:hadoop-0.20.2-cdh3u1.tar.gz + jdk-6u29-linux-i586.bin

第一步,将所需要的软件从本地共享到虚拟机,我们可以使用VMware Tools的Share共享文件夹功能

我们在/usr下新建/hadoopsoft文件夹,把需要的软件拷贝进去:



第二步,安装jdk

首先改变hadoopsoft目录为可执行目录,并安装jdk





第三步,安装hadoop



第四步,创建hadoop的用户组,并创建相应用户hadoopuser







第五步,配置环境变量

打开/etc/profile:



配置完环境变量以后需要重启一下CentOS,然后验证是否成功:



第六步,配置SSH免登陆认证



如果配置不成功需要赋予authorized_keys相应的权限!



第七步,配置hadoop配置文件

  1.hadoop-env.sh 为hadoop添加java环境变量



(为了一下配置的方便,我们先为ip配置一个host)



同时也要修改/hadoop/conf下的masters和slaves文件,修改成相应的host名。

  2.core-site.xml



  3.mapred-site.xml



第八步,为hadoopuser用户赋予hadoop文件夹的使用权限



第九步,格式化namenode



如果格式化不成功,需要删除hadoop临时文件夹下的文件,然后重新执行namenode格式化:



第十步,启动hadoop



如果这些节点都已经启动,则代表hadoop已经正常启动,通过在浏览器里查看:





以上就是我在安装单节点hadoop的配置过程,如有什么疑问欢迎下方跟评论!
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: