(17)mapreduce 提交任务两种方式
2017-05-03 11:40
134 查看
1.本地提交
代码打包到jar里面，上传到服务器，然后用命令行启动
/app/soft/hadoop-2.6.0/bin/hadoop jar /app/soft/hadoop-2.6.0/hadoop.jar com.bigdata.task.keywordCount
2.远程提交
其实YARN是可以通过Java程序向Hadoop集群提交MapReduce任务的。与普通的任务不同的是，远程提交的Job由于读不到服务器上的mapred-site.xml和yarn-site.xml，所以在Job的Configuration里面需要添加一些设置，然后再提交就可以了。
代码打包到jar里面，上传到服务器，然后用命令行启动
/app/soft/hadoop-2.6.0/bin/hadoop jar /app/soft/hadoop-2.6.0/hadoop.jar com.bigdata.task.keywordCount
2.远程提交
其实YARN是可以通过Java程序向Hadoop集群提交MapReduce任务的。与普通的任务不同的是，远程提交的Job由于读不到服务器上的mapred-site.xml和yarn-site.xml，所以在Job的Configuration里面需要添加一些设置，然后再提交就可以了。
内容来自用户分享和网络整理，不保证内容的准确性，如有侵权内容，可联系管理员处理 
相关文章推荐
- 高性能平台上提交任务的两种方式
- 基于hadoop2.5提交mapreduce任务的几种方式
- 获取Executor提交的并发执行的任务返回结果的两种方式/ExecutorCompletionService使用
- 获取Executor提交的并发执行的任务返回结果的两种方式/ExecutorCompletionService使用
- 【Spark篇】---Spark中yarn模式两种提交任务方式
- 【Spark篇】---Spark中yarn模式两种提交任务方式
- 防止表单重复提交的两种方式
- jquery ajax提交表单数据的两种方式
- JBPM4.4 使用泳道动态指定下一个任务节点任务人的两种方式之方法二
- 向服务器端提交数据的两种方式
- Windows下的eclipse(with Hadoop Plug-in)向Linux集群提交MapReduce任务
- Struts2中防止表单重复提交的两种方式
- jquery ajax提交表单数据的两种方式
- asp.net MVC下 使用jquery进行异步提交的两种方式
- form表单的两种提交方式，submit和button的用法
- asp.net MVC下 使用jquery进行异步提交的两种方式
- 防止表单重复提交的两种方式
- JBPM4.4 使用泳道动态指定下一个任务节点任务人的两种方式之一 （assignment-handler）
- jquery ajax提交表单数据的两种方式
- 利用图片提交表单有两种方式：