hadoop2.7.2学习笔记06-CLI MiniCluster

  CLI cluster功能可以使用一个命令直接启动一个包含yarn/mapreduce和hdfs的hadoop集群，避免了配置环境变量和配置文件。

首先需要指定一个环境变量，否则会抛出异常说找不到某个类

$ export HADOOP_CLASSPATH=./share/hadoop/yarn/test/hadoop-yarn-server-tests-2.7.2-tests.jar  

接着使用下面的命令行可以启动CLI MiniCluster

$ bin/hadoop jar ./share/hadoop/mapreduce/hadoop-mapreduce-client-jobclient-2.7.2-tests.jar minicluster -rmport RM_PORT -jhsport JHS_PORT

  RM_PORT和JHS_PORT需要改为具体的端口

  使用-help参数可以打印出其他可选参数。

  启动完毕以后应该可以看到打印出这样的结果：

17/05/11 16:55:08 INFO mapreduce.MiniHadoopClusterManager: Started MiniMRCluster

  并且可以在8088端口查看到web ui。