hadoop-2.6.0运行woudcount报错
2015-07-13 17:03
381 查看
最近安装的hadoop-2.6.0的集群50070和8088web页面都能打开,也不报任何错,但是在运行wordcount作业时,总是不成功,最后修改了mapred-site.xml配置后,再重新格式化namenode、重启集群,再跑wordcount作业,作业提交成功
修改后的mapred-site.xml内容如下
<configuration>
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
<final>true</final>
</property>
<property>
<name>mapred.job.tracker</name>
<value>jobtracker:8021</value>
<final>true</final>
</property>
<property>
<name>mapred.local.dir</name>
<value>/disk1/mapred/local,/disk2/mapred/local</value>
<final>true</final>
</property>
<property>
<name>mapred.system.dir</name>
<value>/tmp/hadoop/mapred/system</value>
<final>true</final>
</property>
<property>
<name>mapred.tasktracker.reduce.tasks.maximum</name>
<value>7</value>
<final>true</final>
</property>
<property>
<name>mapred.child.java.opts</name>
<value>-Xmx400m</value>
</property>
</configuration>
修改后的mapred-site.xml内容如下
<configuration>
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
<final>true</final>
</property>
<property>
<name>mapred.job.tracker</name>
<value>jobtracker:8021</value>
<final>true</final>
</property>
<property>
<name>mapred.local.dir</name>
<value>/disk1/mapred/local,/disk2/mapred/local</value>
<final>true</final>
</property>
<property>
<name>mapred.system.dir</name>
<value>/tmp/hadoop/mapred/system</value>
<final>true</final>
</property>
<property>
<name>mapred.tasktracker.reduce.tasks.maximum</name>
<value>7</value>
<final>true</final>
</property>
<property>
<name>mapred.child.java.opts</name>
<value>-Xmx400m</value>
</property>
</configuration>
相关文章推荐
- 写一个shell脚本利用wget抓取股票历史数据
- linux 常用处理命令
- 关于tomcat配置MyEclipse项目的配置代码
- 基于linux-2.6.35的class_create(),device_create解析
- linux设备驱动开发详解 笔记
- PXE+Kickstart+Apach+DHCP+TFTP实现无人值守安装,centos6.5
- shell脚本使用记录
- linux内核设计与实现的读书笔记
- linux 驱动学习笔记02--应用实例:在内核中新增驱动代码目录和子目录
- Use NTOP's sflow monitor Enterprise traffic
- centos6安装eclipse
- 通过cookie进行网站后台
- linux新机维护开始——重头再来
- CentOS安装JAVA JDK
- Linux命令echo -e -n
- Mac下安装OpenCV3.0—包含opencv_contrib模块
- Linux 命令学习(一)
- Codeforces 383C . Propagating tree【树阵,dfs】
- 以Apache服务器、php语言为例 详解动态网站的访问过程
- hadoop主机名和hbase连接名配置问题记录