hadoop-2.0.0-cdh4.6.0、sqoop-1.4.3-cdh4.6.0、mahout-0.7-cdh4.6.0 安装笔记

1. /etc/profile中环境变量配置:

<configuration>
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>
<property>
<name>mapred.job.tracker</name>
<value>ds:9101</value>
</property>
<property>
<name>mapreduce.jobhistory.address</name>
<value>ds:10020</value>
</property>
<property>
<name>mapreduce.jobhistory.webapp.address</name>
<value>ds:19888</value>
</property>

</configuration>

mapred-site.xml
4）hadoop-env.sh

　　最后加上export JAVA_HOME=/usr/local/jdk1.6.0_13 或者 export JAVA_HOME=$JAVA_HOME

3. 创建目录：$HADOOP_HOME/tmp/dfs/data

4. 启动hadoop：

　　1）hadoop namenode -format

　　2) start-dfs.sh

　　jps看DataNode、SecondaryNameNode、NameNode 是否都起来了，没起来的话查对应的log

　　3）start-yarn.sh

　　jps看NodeManager、ResourceManager 是否都起来了

5. 修改$SQOOP_HOME/bin/configure-sqoop

　　注释掉所有关于zookeeper和hbase的部分

6. 命令：sqoop help 如果出现usage: ... 则安装成功

7. 命令：mahout 如果出现Valid program names are: ... 则Mahout安装成功 （Mahout不需要更改配置文件）