Hadoop WEBHDFS简单配置,使用
2015-01-05 17:32
477 查看
WEBHDFS是一个基于REST的接口。可以查看文件系统,以及文件的内容:
在hdfs-site.xml中配置:
<property>
<name>dfs.namenode.http-address</name>
<value>Hadoop:50070</value> //这个可以不用配置
</property>
<property>
<name>dfs.webhdfs.enabled</name>
<value>true</value>
</property>
启动之后,可以看使用如下命令检测,
获得目录的列表:
[hadoop@Hadoop hadoop]$ curl -i "http://Hadoop:50070/webhdfs/v1/?user.name=hadoop&op=LISTSTATUS"
HTTP/1.1 200 OK
Content-Type: application/json
Content-Length: 225
Server: Jetty(6.1.26.cloudera.2)
{"FileStatuses":{"FileStatus":[
{"accessTime":0,"blockSize":0,"group":"supergroup","length":0,"modificationTime":1359886700728,"owner":"hadoop","pathSuffix":"hadoop","permission":"755","replication":0,"type":"DIRECTORY"}
其中:REST http的格式为:
http://<HOST>:<HTTP_PORT>/webhdfs/v1/<PATH>? [user.name=<USER>&]op=..
具体参照:WebHDFS.html。offline的地址:在hadoop解压之后目录doc下面的/doc/hadoop-yarn/hadoop-yarn-site/WebHDFS.html
在hdfs-site.xml中配置:
<property>
<name>dfs.namenode.http-address</name>
<value>Hadoop:50070</value> //这个可以不用配置
</property>
<property>
<name>dfs.webhdfs.enabled</name>
<value>true</value>
</property>
启动之后,可以看使用如下命令检测,
获得目录的列表:
[hadoop@Hadoop hadoop]$ curl -i "http://Hadoop:50070/webhdfs/v1/?user.name=hadoop&op=LISTSTATUS"
HTTP/1.1 200 OK
Content-Type: application/json
Content-Length: 225
Server: Jetty(6.1.26.cloudera.2)
{"FileStatuses":{"FileStatus":[
{"accessTime":0,"blockSize":0,"group":"supergroup","length":0,"modificationTime":1359886700728,"owner":"hadoop","pathSuffix":"hadoop","permission":"755","replication":0,"type":"DIRECTORY"}
其中:REST http的格式为:
http://<HOST>:<HTTP_PORT>/webhdfs/v1/<PATH>? [user.name=<USER>&]op=..
具体参照:WebHDFS.html。offline的地址:在hadoop解压之后目录doc下面的/doc/hadoop-yarn/hadoop-yarn-site/WebHDFS.html
相关文章推荐
- hadoop开发库webhdfs使用介绍
- [JavaWeb基础] 005.Hibernate的配置和简单使用
- 关于使用Spring和hibernate开发web程序的配置说明和简单实例的详细说明
- Eclipse中使用Hadoop集群模式开发配置及简单程序示例(Windows下)
- [转]Idea2016 使用Maven配置简单Web项目(受益比较多的一篇)
- tomcat配置及使用(环境变量设置及测试,一个简单的web应用实例)
- 获取java web项目里面所有的properties文件并组装在一起,使用方便,配置简单
- Hadoop 2.x HDFS使用和配置步骤
- Hadoop webHDFS设置和使用说明
- Eclipse中使用Hadoop伪分布模式开发配置及简单程序示例(Linux下)
- Hadoop webHDFS设置和使用说明
- Java的Web项目使用DWR简单配置说明
- [JavaWeb基础] 007.Struts2的配置和简单使用
- Spring学习之旅(十一) Spring Web Flow的配置及简单使用
- 【转】解压缩版tomcat配置及使用(环境变量设置及测试,一个简单的web应用实例)
- 使用SpringMVC+mybatis+事务控制+JSON 配置最简单WEB
- Hadoop webHDFS设置和使用说明
- Web开发之tomcat配置及使用(环境变量设置及测试,一个简单的web应用实例)
- hadoop 使用ip配置导致hdfs启动失败
- 【Idea】Idea2016 使用Maven配置简单Web项目