基于Linux系统的hadoop安装教程
1、hadoop安装包下载:直接百度搜索hadoop进入官网选择自己想要的版本下载即可。
2、将hadoop安装包通过xftp拉到自己创建的虚拟机中,我是放在了opt文件夹中,并且在opt文件夹下建了一个soft文件夹,将解压后的hadoop放到soft文件夹中,便于以后使用,在这里我是将解压包放到soft下并且改名为hadoop260。
tar -zxf hadoop安装包
mv /opt/hadoop解压包 /opt/soft/hadoop260
3、修改hadoop的配置文件
(1)先进入hadoop的配置文件
cd /opt/soft/hadoop/etc/hadoop
进入这个文件夹之后就可以看到很多的配置文件。
首先我们要改hadoop-env.sh
vi hadoop-env.sh
进入配置文件后需要将JAVA_HOME的地址改为虚拟机上的jdk路径。
(2)修改core-site.xml
vi core-site.xml
在configuration标签中添加如图所示的四个配置项,上面的红框里是 hdfs://虚拟机 地址:9000,9000是默认端口号,下面的红框里路径要注意,要改成自己hadoop所在路径下的tmp。
(3)修改mapred-site.xml
(如果没有mapred-site.xml这个配置文件,就复制mapred-site.xml.template,改名为mapred-site.xml)
cp mapred-site.xml.template mapred-site.xml
复制成功后就可以访问文件了。
vi mapred-site.xml
在configuration中加入上图的配置项。
(4)修改hdfs-site.xml
vi hdfs-site.xml
在configuration中加入上图的配置项。
(5)修改yarn-site.xml
vi yarn-site.xml
在configuration中加入上图的配置项。
4、修改系统文件profile
vi /etc/profile
红框中的就是hadoop需要添加的变量,其中
hadoop的安装地址要改成自己的安装地址。
5、激活配置文件
source /etc/profile
6、格式化处理
hadoop namenode -format
7、启动hadoop
start-all.sh
验证是否成功:输入jps命令。查看是否有这五个进程(namenode、datanode、resourceManger、secondaryNameNode、nodeManger),在网页地址栏中输入虚拟机地址:50070,如果出现Hadoop可视化页面,则证明启动成功。
- VMware 安装 Linux 系统 最快最详细 基于Centos7的虚拟机安装教程
- 如何在基于linux系统的hadoop集群中,安装配置hbase,hive,zookeeper
- 终于解决在基于rpm的linux系统安装google-talkplugin_current_i386
- 使用Cygwin模拟Linux环境安装配置运行基于单机的Hadoop
- 在Linux系统中安装即时通信应用Telegram Messenger的教程
- 在Linux系统中配置Hadoop环境(1)---在虚拟机上安装Linux Ubuntu系统
- Linux系统安装后的基础优化-基于CentOS(5.8/6.4)
- linux系统如何安装软件(详细文字教程)
- Linux系统下PHP-FPM的安装和配置教程
- 用VirtualBox实现xp下多系统(dsl linux安装)图文教程
- WIN下虚拟机安装linux系统教程
- Linux 环境下部署Hadoop 2.x,建议尝试64位系统下进行本地编译的安装方式
- Linux系统下安装Vmware教程
- 在Linux系统中安装使用恶意软件扫描工具及杀毒引擎的教程
- 在Linux系统上安装Wine的教程
- 在Linux 系统 Latex安装 使用入门教程
- linux(centos7)基于hadoop2.5.2安装spark1.2.1
- macbook pro上安装三系统详解教程(mac os x+windows+linux ubuntu)
- 1002.在线视频―Linux速成教程(二)Linux系统安装
- Linux/Unix系统下nginx+php安装简明教程