win7下通过eclipse连接hadoop
2015-11-20 14:09
435 查看
首先,环境如下:
hadoop: 2.4.0
jdk: 1.7
eclipse:helios-SR2
linux:centos 6.5
hadoop2x-eclipse-plugin.zip
hadoop-common-2.x.x-bin-master.zip
开始安装前的准备工作:
前提:已经准备好了最基本的hadoop集群,本机是利用oracle vm构建两个centos 6.5的虚拟机,组成hadoop简单集群
1. 将hadoop的source和bin版本、hadoop-common-xxx都解压后放在同一文件夹目录下。把hadoop-common-xxx文件夹下bin目录中的内容全部靠到hadoop的bin版本的目录/bin中,替换部分内容。将hadoop的bin版添加到windows的环境变量中。
2. 将hadoop2x-eclipse-plugin中的jar丢到eclipse的plugin目录中,在打开的eclipse配置hadoop.记住,先在window的hosts中加入hadoop主节点的ip name。在eclipse中设置hadoop时,将name配置给hdfs的name(默认是localhost),并将端口分别设置为9001, 9000.
3. 将hadoop-examples-xxx的demo引入后,需要一些jar.基本上都在hadoop的bin版的share里面可以找到。
通过上面的设置,我们就可以在windows下的eclipse中进行m/r等开发,效果还不错。
hadoop: 2.4.0
jdk: 1.7
eclipse:helios-SR2
linux:centos 6.5
hadoop2x-eclipse-plugin.zip
hadoop-common-2.x.x-bin-master.zip
开始安装前的准备工作:
前提:已经准备好了最基本的hadoop集群,本机是利用oracle vm构建两个centos 6.5的虚拟机,组成hadoop简单集群
1. 将hadoop的source和bin版本、hadoop-common-xxx都解压后放在同一文件夹目录下。把hadoop-common-xxx文件夹下bin目录中的内容全部靠到hadoop的bin版本的目录/bin中,替换部分内容。将hadoop的bin版添加到windows的环境变量中。
2. 将hadoop2x-eclipse-plugin中的jar丢到eclipse的plugin目录中,在打开的eclipse配置hadoop.记住,先在window的hosts中加入hadoop主节点的ip name。在eclipse中设置hadoop时,将name配置给hdfs的name(默认是localhost),并将端口分别设置为9001, 9000.
3. 将hadoop-examples-xxx的demo引入后,需要一些jar.基本上都在hadoop的bin版的share里面可以找到。
通过上面的设置,我们就可以在windows下的eclipse中进行m/r等开发,效果还不错。
相关文章推荐
- javax.imageio.IIOException: Can't create cache file!
- Spring 通过配置文件注入 properties文件
- Java String.endsWith()方法
- java.ByteArrayInputStream与ByteArrayOutputStream再次理解
- JUNIT -- springMVC的action进行单元测试
- [代码]JAVA触发器,Spring的quartz配置
- struts2中JSP无法用<jsp:forward page="test.action"> 跳转到对应的 action中解决方法
- Eclipse获取android更新信息失败的解决问题(换代理服务器)
- JAVA代码与编程题
- java 把InputStream流写入到文件中
- java杨辉三角
- java注解的理解和实例
- eclipse无法导出android签名包的问题
- 有Main方法的Java类的类名取得
- Java中的static关键字
- 启动"命令提示符"定位到D盘java文件夹
- SpringMVC的工作原理
- eclipse sae上传代码
- Java注释@interface的用法【转】
- Eclipse设置提示