windows下连接hadoop并且编写调试mapReduce程序

windows下连接hadoop并且编写调试mapReduce程序

1.下载你相对版本的hadoop-eclips插件，我的是1.0.0，

2.将该插件放到你的myeclips\dropins目录下

3.重启Myeclipse,选择window–>Open Perspective–>Others;选择Map/Reduce;

4.根据你的hadoop进行配置

5.这个时候应该可以读取你的HDFS了

6.新建一个Java项目

7.为你的项目引入hadoop的jar包

8.修改windows/System32/Drivers/etc/hosts,加上你namenode的机器名称和ip

否则会报如下错误：unknow host

9.修改hadoop/conf/ hdfs-site.xml ，加上如下属性：

<property>

<name>dfs.permissions</name>

<value>false</value>

</property>

否则run MapReduce的时候会报如下错误：

org.apache.hadoop.security.AccessControlException: Permission denied: user=Think, access=WRITE, inode=”output”:root:supergroup:rwxr-xr-x