如何在百度云平台上执行Hadoop MapReduce程序
2014-04-15 10:02
190 查看
发现百度云平台,可以在线执行hadoop MapReduce程序,很欣喜,摸索了一下,可以使用。大概想这才叫做云计算啊,我把计算任务给你,你把计算结果还给我。
首先要有百度账号。
从平台入口进入:http://openresearch.baidu.com/activity/platform.jspx。
会看到如下的界面,其实就是把linux系统的控制台搬到了浏览器上。可用的命令这里已经有了说明。
输入命令:hadoop jar $hadoop_examples pi 2 100,就可以运行自带的实例,来计算PI的值。 当然,可以自己上传自己的程序来执行,如下,可上传文件,包括jar包和数据文件。
比如,我这里上传了这两个文件,一个是hadoop1.2.1版本里自带的例子,一个是数据文件。
下面把上传的数据文件放到HDFS上面:
这样就可以执行hadoop jar来运行这个例子了。
执行成功。自动建立output文件夹并输出了三个文件。
下面来看一下结果片段:
不仅如此,还可以绑定网盘,从网盘直接复制文件过来。这一切都是免费的! 还有很多需要学习摸索。
会看到如下的界面,其实就是把linux系统的控制台搬到了浏览器上。可用的命令这里已经有了说明。
输入命令:hadoop jar $hadoop_examples pi 2 100,就可以运行自带的实例,来计算PI的值。 当然,可以自己上传自己的程序来执行,如下,可上传文件,包括jar包和数据文件。
比如,我这里上传了这两个文件,一个是hadoop1.2.1版本里自带的例子,一个是数据文件。
下面把上传的数据文件放到HDFS上面:
这样就可以执行hadoop jar来运行这个例子了。
执行成功。自动建立output文件夹并输出了三个文件。
下面来看一下结果片段:
不仅如此,还可以绑定网盘,从网盘直接复制文件过来。这一切都是免费的! 还有很多需要学习摸索。
相关文章推荐
- 如何在百度云平台上执行Hadoop MapReduce程序
- hadoop如何执行自己编写的MapReduce程序
- hadoop如何执行自己编写的MapReduce程序
- Hadoop平台执行Wordcount程序
- Windows平台开发Mapreduce程序远程调用运行在Hadoop集群—Yarn调度引擎异常
- 如何使用Python为Hadoop编写一个简单的MapReduce程序(这个人T字还有好几篇精华的可以看)
- MapReduce 本地执行hadoop程序 报错 java.lang.RuntimeException: java.lang.reflect.InvocationTargetException
- Windows平台开发Mapreduce程序远程调用运行在Hadoop集群—Yarn调度引擎异常
- 如何在Hadoop上编写MapReduce程序
- 如何在Hadoop的MapReduce程序中处理JSON文件
- 如何使用Python为Hadoop编写一个简单的MapReduce程序
- Hadoop学习笔记之如何运行一个MapReduce程序
- 如何使用Python为Hadoop编写一个简单的MapReduce程序
- Hadoop详解(三)——MapReduce原理和执行过程,远程Debug,Writable序列化接口,MapReduce程序编写
- 如何在Hadoop的MapReduce程序中处理JSON文件
- 获取Tachyon上的数据去执行Hadoop的MapReduce程序
- Hadoop MapReduce 程序执行过程
- 如何在Hadoop上编写MapReduce程序
- 如何在Hadoop上编写MapReduce程序
- 如何编译可以在arm平台上运行的可执行程序?