您的位置:首页 > 大数据

大数据--hadoop入门级demo01及相关API介绍

2018-03-01 21:52 323 查看
window下使用eclipse开发 hadoop 的Demo  步骤



[b]例:从hadoop url读取数据[/b] HDFS中有一个/input/input1.txt文件,文件内容“hello hadoop!”
public class Test01 {
static Path path = new Path("hdfs://192.168.28.130:9000/input/input.txt");

public static void main(String[] args) throws IOException  {
System.setProperty("hadoop.tmp.dir","D:\\hadoop2.6\\hadoop2.6");
Configuration conf = new Configuration();
FileSystem fs = null;
FSDataInputStream dis = null ;
try {
fs = path.getFileSystem(conf);
    dis = fs.open(path);
IOUtils.copyBytes(dis, System.out, conf,false);
} catch (IOException e) {
// TODO Auto-generated catch block
e.printStackTrace();
} finally {
IOUtils.closeStream(dis);
fs.close();

}
}
   
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: