您的位置:首页 > 运维架构

Ubuntu安装单机版hadoop注意事项

2015-10-01 15:06 232 查看
网上Ubuntu安装单机版的案例教程很多,本人参考

:http://www.linuxidc.com/Linux/2015-04/116447.htm

进行安装。在创建hadoop用户以及更改权限时,在系统设置的界面可以把hadoop设置为管理员,从而具有root 的权限。比如可以进入root目录等。

1.创建ssh

使用 sudo apt-getinstallssh
openssh-server 命令可以方便的创建ssh,但是在设置ssh无密码登录时,ssh-keygen
-t rsa -P “”该命令必须是大写P,而不能是小写。

2.新版的hadoop在配置文件时,所有的配置文件在etc中,且mapred-site.xml文档更换为yarn-site.xml.即对yarn-site.xml进行相关设置。

3.启动hadoop后,运行Wordcount案例时,出现wordcount hdfs://localhost:9000/input not exist错误提示。这是因为在安装好hadoop并启动后,测试案例时只在本地硬盘建立了input文件夹,而没有把input中的文件上传至hdfs所致,首先使用

、bin/hadoop fs -mkdir /input

在hdfs上创建输入文件夹目录。然后把本地硬盘上的文件传进input里面:(具体的文件路径有所不同)

bin/hadoop fs -put ~/hadoop/input/README.txt /input

4.另外,也要注意Ubuntu的版本,hadoop是在32位环境下编译的,运行在64位Ubuntu的时候可能会有native数据库加载异常提醒。
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: