Eclipse在基于Ubuntu14.04的hadoop2.7.1分布式集群下的搭建
2017-03-24 18:30
363 查看
软件 | 版本 | 所在目录 |
Eclipse | eclipse-inst-linux64 | /home/bigdata/eclipse |
Hadoop | Hadoop2.7.1 | /usr/local/hadoop |
Jdk | jdk1.8 | /usr/local/java |
插件 | hadoop-eclipse-plugin-2.7.1.jar | /home/bigdata/eclipse/jee-neon/eclipse/dropins |
测试代码 | WordCount.java | /opt/modules |
选择Ubuntu14.04是因为在VMware中,Ubuntu是可以直接从Windows下粘贴复制文件的。
首先将eclipse-java-mars-1-linux-gtk-x86_64.tar.gz,hadoop-eclipse-plugin-2.7.1.jar放在Downloads目录下。
1、安装Eclipse
将eclipse-inst-linux64.tar.gz下载后,复制粘贴到Downloads文件夹。
打开终端,输入
cd /opt/modules
tar -zxvf eclipse-java-mars-1-linux-gtk-x86_64.tar.gz
bigdata是linux分配的普通用户的名字。对eclipse进行解压缩。
进入eclipse-installer,
双击eclipse-inst
双击Java EE 的IDE,进行安装,并将hadoop-eclipse-plugin-2.7.1.jar复制粘贴到eclipse的dropins文件夹下,并对该插件进行授权,使得普通用户可以使用。
cd /home/bigdata/eclipse/jee-neon/eclipse/dropins
chmod 444 hadoop-eclipse-plugin-2.7.1.jar
点击图标,启动eclipse。
2、配置eclipse
点击window->Preferences,找到Hadoop Map/Reduce,将Hadoop installation directory设置为hadoop安装目录,点击ok。
我的haddop的路径安装在以上文件夹下,即包括bin、include、share等文件夹的那个路径。
点击window->Show View->Other,选择MapReduce Tools下的小象,点击ok。
点击Map/Reduce Location后的小象添加一个Hadoop Location
LocationName下随便起名字,DFS Master下的端口填写为core-site.xml下所配置的端口地址,
另一个端口为下图所示端口,8088,即jobtracker的端口,如果没有设置,默认为8088
如下所示
host为主节点的主机名。
如果在eclipse的左上角出现这样的标志,代表配置成功。
如果报错的话,一定是host和port没有设置对,或者是还未启动hadoop,没有其他原因了,一般。
相关文章推荐
- ubuntu上搭建eclipse下hadoop-2.7.1集群(全分布式)开发环境遇到的几个问题笔记
- Windows上运行Eclipse使用virtualbox搭建的Ubuntu的hadoop集群服务
- 搭建ubuntu14.04的hadoop集群【docker容器充当服务器】
- 在ubuntu14.04上使用ambari搭建hadoop集群
- VMWare10下基于Ubuntu14搭建Hadoop-1.2.1集群
- Windows 7平台利用Vmware Workstation 11虚拟机搭建Hadoop 2.7.4基于Ubuntu kylin 14.04集群环境
- VMWare9下基于Ubuntu12.10搭建Hadoop-1.2.1集群
- VMWare9下基于Ubuntu12.10搭建Hadoop-1.2.1集群—整合Zookeeper和Hbase
- Ubuntu下搭建基于Eclipse的Hadoop平台
- 在 Ubuntu 上搭建 Hadoop 分布式集群 Eclipse 开发环境
- ubuntu14.04搭建hadoop伪集群环境
- 基于Docker搭建Hadoop集群(ubuntu操作系统)
- 基于Ubuntu 12.04+Hadoop1.2.0 的Hadoop集群搭建
- Hadoop集群搭建(hadoop+zookeeper+hbase)Ubuntu14.04
- ubuntu14.04搭建hadoop集群
- Ubuntu 上Hadoop2.7.1分布式集群搭建
- Ubuntu14.04+hadoop2.5.2完全分布式集群搭建
- Hadoop2.5.2+ubuntu14.04+eclispe+hadoop2x-eclipse-plugin-master搭建开发环境
- Ubuntu Server 12.04 搭建 hadoop 集群版环境——基于VirtualBox