java操作HDFS文件系统
2012-12-25 19:34
211 查看
看了好长时间的hdfs,感觉真不是一个简单明了的,多了一些配置性的东西,缺少一些合理的固定约束,或许是赶着云计算的风潮,去把它当作一个分布式文件系统使用。Hdfs的连接感觉不算很简单,在mapreduce上跑了多次程序后,发现其conf在本机上走的那么像是一个没有配置的本机环境,简单的上传文件到了本地文件系统中。
hdfs中文件的上传和获取通过FileSystem操作,算是一个很不错的接口,文件上传的配置都在走一个conf,还不知道怎么在项目中新建xml文件作为其默认配置,其set方法还基本能作为上传的方式
这样的设置可以基本把文件传到了hdfs上,好像一个不错的选择。
项目发布在:https://github.com/wangdiao/hdfsextsocket.git
hdfs中文件的上传和获取通过FileSystem操作,算是一个很不错的接口,文件上传的配置都在走一个conf,还不知道怎么在项目中新建xml文件作为其默认配置,其set方法还基本能作为上传的方式
Configuration conf = new Configuration(); conf.set("fs.default.name","hdfs:///127.0.0.1:9000"); FileSystem fs = FileSystem.get(conf);
这样的设置可以基本把文件传到了hdfs上,好像一个不错的选择。
项目发布在:https://github.com/wangdiao/hdfsextsocket.git
相关文章推荐
- HDFS的java接口——简化HDFS文件系统操作
- HDFS文件系统简单的Java读写操作
- JAVA API操作HDFS文件系统
- hdfs文件系统中相互复制的java操作
- 排坑!java操作hadoop中的hdfs文件系统
- JAVA API操作HDFS文件系统
- java实现对hdfs文件系统的上传,下载,删除,创建文件夹的操作演示
- HDFS文件系统操作JAVA-API
- HDFS的java接口——简化HDFS文件系统操作
- HDFS文件系统在JAVA中的操作(1) 读取文件
- java操作hdfs文件系统上的文件
- Hadoop HDFS文件操作的Java代码
- Hadoop学习之java连接HDFS文件系统
- Hadoop HDFS文件操作的Java代码
- Hadoop HDFS文件操作的Java代码
- 对HDFS文件系统文件的读、写、删操作
- java API 操作HDFS文件系统
- JAVA实现:将文件从本地上传到HDFS上、从HDFS上读取等操作
- HDFS文件系统的基本操作 Hadoop权威指南
- JAVA API 实现hdfs文件操作