您的位置:首页 > 大数据 > Hadoop

虚拟机配置环境安装hadoop

2020-02-03 04:04 1876 查看

虚拟机配置环境安装hadoop

  • 安装
  • 关防火墙
  • 配置主机名
  • 配置jdk
  • 设置免密登录
  • 安装hadoop
  • 下载准备

    需要下载一些安装包为hadoop的安装搭建环境

    下载VMware虚拟机

    https://www.vmware.com/products/workstation-pro.html

    下载centos镜像

    http://isoredirect.centos.org/centos/8/isos/x86_64/CentOS-8-x86_64-1905-dvd1.iso

    下载jdk

    https://www.oracle.com/technetwork/java/javase/downloads/index.html

    下载hadoop

    http://www.apache.org/dist/hadoop/core/

    安装

    将下载准备的安装到虚拟机上

    创建虚拟机

    打开VMware 点击创建虚拟机

    选择下载的centos镜像,并根据向导完成系统安装

    配置网络

    centos7

    vi /etc/sysconfig/network-scripts/ifcfg-ens33

    将文件中的ONBOOT改为yes

    centos6

    将ONBOOT改成yes,将MN_CONTROLLED改为no

    重新配置网络

    service network restart

    关防火墙

    centos7

    查看防火墙状态

    firewall-cmd --state

    关闭防火墙

    systemctl stop firewalld.service

    禁止开机自启

    systemctl disable firewalld.service

    centos6.x

    关闭防火墙

    service iptables stop

    禁止开机自启

    chkconfig iptables off

    配置主机名

    打开hosts文件

    vi /etc/hosts

    在下面加上自己的ip地址和主机名

    配置jdk

    解压jdk

    将压缩包上传到系统
    如果不能拖拽传输需先安装lrzsz

    yum install -y lrzsz

    创建文件夹

    mkdir /opt/jdk

    解压jdk到新建的文件中

    tar -xzvf /jdk-8u161-linux-x64.tar.gz -C /opt/jdk/

    进入文件夹

    cd /opt/jdk/jdk1.8.0_161

    配置环境变量

    检查路径并复制

    pwd

    打开配置环境变量的文件

    vi /etc/profile

    在最下面加入

    # JAVA_HOME
    export JAVA_HOME=/opt/jdk/jdk1.8.0_161
    export CLASSPATH=.:$JAVA_HOME/lib
    export PATH=$PATH:$JAVA_HOME/bin

    重置设置

    source /etc/profile

    输入 java 检测是否安装成功,出现如下内容表示安装成功

    设置免密登录

    用rsa算法设置免密登录

    ssh-keygen -t rsa
    ssh-copy-id 192.168.219.130

    输入密码
    之后检测

    ssh 192.168.219.130

    不再需要输入密码登录 成功

    安装hadoop

    传入安装包

    创建文件夹

    mkdir /opt/hadoop

    解压hadoop到文件夹

    tar -xzvf /hadoop-2.9.2.tar.gz -C /opt/jdk/

    配置环境变量

    检测路径并复制

    pwd

    打开配置环境变量的文件

    vi /etc/profile

    在最下面加入

    # HADOOP_HOME
    export HADOOP_HOME=/opt/hadoop/hadoop-2.9.2
    export PATH=$PATH:$HADOOP_HOME/bin
    export PATH=$PATH:$HADOOP_HOME/sbin

    重置设置

    source /etc/profile

    输入 hadoop 检测是否安装成功,出现如下内容表示安装成功

    完成

    • 点赞 1
    • 收藏
    • 分享
    • 文章举报
    差得远呢, 发布了2 篇原创文章 · 获赞 1 · 访问量 121 私信 关注
    内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
    标签: 
    相关文章推荐