hadoop 2.5.1+zookeeper-3.4.6+hbase-0.98.8-hadoop2 完全安装
2014-11-29 20:01
495 查看
由于工作的需要研究 hbase 所以我要去研究这一套系统的安装
我们首先来下载hdoop,zookeeper和 hbase,到了apache hadoop 网站都有的下,不过要考虑版本问题
尤其是hbase, 不知道为啥 我安装hbase-0.99.0 失败,只好选0.98.x 但是0.98.X 分 hadoop1 或者hadoop2
请看清楚再下载
然后我们开始做一些准备工作
系统的请关闭ipv6
linux检测ipv6 关闭方式
cat /proc/sys/net/ipv6/conf/all/disable_ipv6
如果是0的话就是关闭是1就是开启
防火墙关闭
Ubuntu sudo ufw disable
Linux sudo service iptable
修改/etc/hosts文件
你要加入的主机的ip地址名称加入其中
并在其他主机做同样操作
修改主机名称
Vi /etc/hostsname
安装ssh并设定无验证连接
Ubuntu apt-get install ssh
Linux yum install openssh*
生成秘钥
Ssh-keygen –t rsa –P “”
在你所在权限下会出现
复制 id_rsa.pub 到其他的datanode上
Scp authorized_keys Hadoop@datanode1:~/.ssh
安装Java
用alien转rpm到deb
设置/etc/profile
export JAVA_HOME=/usr/java/jdk1.8.0_25
exportCLASSPATH=.:$JAVA_HOME/lib:$HADOOP_HOME/lib:$CLASSPATH
export PATH=$JAVA_HOME/bin
Hadoop 应用于64位安装
安装 svn
下载 Hadoop源代
Yum install autofaunto make libtool cmake
Yum install ncurses-devel
Yum install opensll-ssl
Yum intall gcc*
安装maven
安装 ant
安装 protobuf
mvn install-DskipTests
mvn package -Pdist,native -DskipTests -Dtar-Dmaven.javadoc.skip=true
软后到/root/hadoop-2.5.1-src/hadoop-dist/target 找到编译好的压缩包
我们首先来下载hdoop,zookeeper和 hbase,到了apache hadoop 网站都有的下,不过要考虑版本问题
尤其是hbase, 不知道为啥 我安装hbase-0.99.0 失败,只好选0.98.x 但是0.98.X 分 hadoop1 或者hadoop2
请看清楚再下载
然后我们开始做一些准备工作
系统的请关闭ipv6
linux检测ipv6 关闭方式
cat /proc/sys/net/ipv6/conf/all/disable_ipv6
如果是0的话就是关闭是1就是开启
防火墙关闭
Ubuntu sudo ufw disable
Linux sudo service iptable
修改/etc/hosts文件
你要加入的主机的ip地址名称加入其中
并在其他主机做同样操作
修改主机名称
Vi /etc/hostsname
安装ssh并设定无验证连接
Ubuntu apt-get install ssh
Linux yum install openssh*
生成秘钥
Ssh-keygen –t rsa –P “”
在你所在权限下会出现
复制 id_rsa.pub 到其他的datanode上
Scp authorized_keys Hadoop@datanode1:~/.ssh
安装Java
用alien转rpm到deb
设置/etc/profile
export JAVA_HOME=/usr/java/jdk1.8.0_25
exportCLASSPATH=.:$JAVA_HOME/lib:$HADOOP_HOME/lib:$CLASSPATH
export PATH=$JAVA_HOME/bin
Hadoop 应用于64位安装
安装 svn
下载 Hadoop源代
Yum install autofaunto make libtool cmake
Yum install ncurses-devel
Yum install opensll-ssl
Yum intall gcc*
安装maven
安装 ant
安装 protobuf
mvn install-DskipTests
mvn package -Pdist,native -DskipTests -Dtar-Dmaven.javadoc.skip=true
软后到/root/hadoop-2.5.1-src/hadoop-dist/target 找到编译好的压缩包
相关文章推荐
- 大数据之Hadoop平台(四)Centos6.5(64bit)Hadoop2.5.1、Zookeeper3.4.6、Hbase0.98.6.1安装使用过程中错误及解决方法
- KVM下centOS6.5+HADOOP2.7.1+zookeeper3.4.6+hbase-1.2.4安装手记
- 【Hadoop2.7.0、Zookeeper3.4.6、JDK1.7】搭建完全分布式的hadoop,HA部署安装,自动备援
- Hadoop2.5.1安装Hbase + Zookeeper
- hadoop-2.6.0+zookeeper-3.4.6+hbase-1.0.0+hive-1.1.0完全分布式集群HA部署
- hadoop+hbase+zookeeper完全分布安装(1)
- 搭建3个节点的hadoop集群(完全分布式部署)--3 zookeeper与hbase安装
- 完全分布式安装Hadoop,Hive,Hbase,Hwi,Zookeeper-500行说明
- HBase-1.3.0+zookeeper-3.4.10+hadoop-2.7.3完全分布式安装
- hadoop2.6完全分布式安装zookeeper3.4.6
- hadoop+hbase+zookeeper完全分布安装(2)
- Hadoop2.6.4、zookeeper3.4.6、HBase1.2.2、Hive1.2.1、sqoop1.99.7、spark1.6.2安装
- 基于hadoop集群的Hive1.2.1、Hbase1.2.2、Zookeeper3.4.8完全分布式安装
- hadoop+zookeeper+hbase 完全安装手册
- 个人hadoop学习总结:Hadoop集群+HBase集群+Zookeeper集群+chukwa监控(包括单机、伪分布、完全分布安装操作)
- 完全分布式安装Hadoop,Hive,Hbase,Hwi,Zookeeper
- hadoop,hbase,zookeeper安装配置
- HADOOP__HBASE集群安装(自带ZOOKEEPER)
- Hadoop+Hbase+ZooKeeper 安装配置及需要注意的事项
- Hadoop-HBase-Zookeeper安装记录