大数据--hadoop入门级demo01及相关API介绍
2018-03-01 21:52
323 查看
window下使用eclipse开发 hadoop 的Demo 步骤
[b]例:从hadoop url读取数据[/b] HDFS中有一个/input/input1.txt文件,文件内容“hello hadoop!”
public class Test01 {
static Path path = new Path("hdfs://192.168.28.130:9000/input/input.txt");
public static void main(String[] args) throws IOException {
System.setProperty("hadoop.tmp.dir","D:\\hadoop2.6\\hadoop2.6");
Configuration conf = new Configuration();
FileSystem fs = null;
FSDataInputStream dis = null ;
try {
fs = path.getFileSystem(conf);
dis = fs.open(path);
IOUtils.copyBytes(dis, System.out, conf,false);
} catch (IOException e) {
// TODO Auto-generated catch block
e.printStackTrace();
} finally {
IOUtils.closeStream(dis);
fs.close();
}
}
[b]例:从hadoop url读取数据[/b] HDFS中有一个/input/input1.txt文件,文件内容“hello hadoop!”
public class Test01 {
static Path path = new Path("hdfs://192.168.28.130:9000/input/input.txt");
public static void main(String[] args) throws IOException {
System.setProperty("hadoop.tmp.dir","D:\\hadoop2.6\\hadoop2.6");
Configuration conf = new Configuration();
FileSystem fs = null;
FSDataInputStream dis = null ;
try {
fs = path.getFileSystem(conf);
dis = fs.open(path);
IOUtils.copyBytes(dis, System.out, conf,false);
} catch (IOException e) {
// TODO Auto-generated catch block
e.printStackTrace();
} finally {
IOUtils.closeStream(dis);
fs.close();
}
}
相关文章推荐
- java 大数据以及Hadoop相关概念介绍
- java 大数据以及Hadoop相关概念介绍
- 【个人笔记】002-PHP基础-01-PHP快速入门-02-PHP语言相关介绍输
- 大数据以及Hadoop相关概念介绍
- Hadoop入门(八)自定义类型实例-统计手机流量数据Demo
- Hadoop MapReduce编程 API入门系列之挖掘气象数据版本3(九)
- Hadoop MapReduce编程 API入门系列之自定义多种输入格式数据类型和排序多种输出格式(十一)
- java 大数据以及Hadoop相关概念介绍
- java 大数据以及Hadoop相关概念介绍
- Hadoop学习总结(1)——大数据以及Hadoop相关概念介绍
- 大数据以及Hadoop相关概念介绍
- java 大数据以及Hadoop相关概念介绍
- Hadoop学习总结(1)——大数据以及Hadoop相关概念介绍
- Hadoop教程(一):简介、大数据解决方案、介绍快速入门
- java 大数据以及Hadoop相关概念介绍
- 大数据技术Hadoop入门理论系列之一----hadoop生态圈介绍
- Hadoop学习总结(1)——大数据以及Hadoop相关概念介绍
- java 大数据以及Hadoop相关概念介绍
- Hadoop MapReduce编程 API入门系列之Crime数据分析(二十五)(未完)
- java 大数据以及Hadoop相关概念介绍