如何在Windows中运行MapReduce程序
2017-03-16 22:42
162 查看
Windows上配置环境变量
解压Hadoop,然后把Hadoop的根目录配置到HADOOP_HOME环境变量里面然后把HADOOP_HOME/lib和HADOOP_HOME/bin配置到path里面。
替换bin目录
要在Windows运行MapReduce,你首先需要编译Windows版的Hadoop的应用程序。然后把官网下载的Hadoop目录下面的bin目录替换成Windows下编译的Hadoop的bin目录。关于这一点,我已经上传了自己编译好的hadoop-2.7.3的bin目录,可以从 http://download.csdn.net/detail/mrbcy/9758112下载。
我的环境是Win10 64位。如果跟我的不一样可以参考我的另一篇博客http://blog.csdn.net/mrbcy/article/details/55806809 自已编译即可。
在应用程序中包含正确的Jar包
原则上需要把hadoop-2.7.3/share/hadoop/下的common、hdfs、mapreduce、yarn下的jar包的基础包和它们的lib下的jar包都包含进来。运行
现在可以在Windows运行MapReduce程序了。这里用http://blog.csdn.net/mrbcy/article/details/61455917中的计算PI来做例子。输入数据是:
99999 999999 9999999 99999999
在运行设置里面配置运行参数,主要是任务的输入目录和输出目录,如下图所示:
然后点击运行,会看到控制台的输出,如下图所示:
最后看一下输出:
99999 3.1408314083140834 999999 3.1416111416111416 9999999 3.1412607141260716 99999999 3.1414984314149845
相关文章推荐
- 如何在Windows中运行MapReduce程序
- FireFox如何在Windows下运行多个程序实例
- 【转】[Python Tip]如何在Windows下方便地进入命令行运行程序
- 如何快速地编写和运行一个属于自己的MapReduce例子程序
- windows下使用Eclipse编译运行MapReduce程序 Hadoop2.6.0/Ubuntu
- 如何在Windows下使用Linux系统来编译和运行程序?
- 如何在WINDOWS下运行UNIX程序和GNU程序
- windows下使用Eclipse运行MapReduce程序出错: Failed to set...
- 如何在windows命令行窗口运行Java程序
- 如何快速地编写和运行一个属于自己的 MapReduce 例子程序
- 我的Cocos2d-x学习笔记(一)Windows下程序如何开始运行
- 如何设置C#程序在Windows 7 Vista下以管理员权限运行
- 如何在Amazon Elastic MapReduce(EMR)上运行MapReduce程序
- 如何在本地Windows环境中用Eclipse中调试MapReduce程序
- C#建立了一个windows程序,如何防止多个程序实例运行?
- 如何让64位的windows上的IIS可以运行32位的程序
- windows下使用Eclipse运行MapReduce程序出错: Failed to set...
- 如何设置C#程序在Windows 7 Vista下以管理员权限运行
- 我的Cocos2d-x学习笔记(一)Windows下程序如何开始运行
- 如何分布式运行mapreduce程序