Spark API编程动手实战-08-基于IDEA使用Spark API开发Spark程序-01
2015-02-10 13:07
417 查看
创建一个Scala IDEA工程:
点击“Next”:
点击“Finish”完成工程的创建:
修改项目的属性:
首先修改Modules选项:
在src下创建两个文件夹,并把其属性改为source:
再修改Libraries:
因为要开发Spark程序,所以需要把Spark的开发需要的jar包导进来:
导入包完成后,在工程的scala下面创建一个package:
创建一个Object对象:
完成初始类的创建:
首先构建Spark Driver的模板代码:
该程序是对前面的搜狗日志的处理代码,只不过这个时候在IDEA中编写而已。
点击“Next”:
点击“Finish”完成工程的创建:
修改项目的属性:
首先修改Modules选项:
在src下创建两个文件夹,并把其属性改为source:
再修改Libraries:
因为要开发Spark程序,所以需要把Spark的开发需要的jar包导进来:
导入包完成后,在工程的scala下面创建一个package:
创建一个Object对象:
完成初始类的创建:
首先构建Spark Driver的模板代码:
该程序是对前面的搜狗日志的处理代码,只不过这个时候在IDEA中编写而已。
相关文章推荐
- Spark API编程动手实战-08-基于IDEA使用Spark API开发Spark程序-01
- Spark API编程动手实战-08-基于IDEA使用Spark API开发Spark程序-02
- Spark API编程动手实战-08-基于IDEA使用Spark API开发Spark程序-02
- 基于IDEA使用Spark API开发Spark程序
- 孙其功陪你学之——基于IDEA使用Spark API开放Spark程序(3)
- 孙其功陪你学之——基于IDEA使用Spark API开放Spark程序(2)
- 孙其功陪你学之——基于IDEA使用Spark API开放Spark程序(1)
- 第8课:彻底实战详解使用IDE开发Spark程序--集群模式运行
- 使用IDEA进行Spark开发(二)-第一个scala程序
- 使用IDEA开发spark程序
- 第10课:底实战详解使用Java开发Spark程序学习笔记
- Learning Spark——使用Intellij Idea开发基于Maven的Spark程序
- Spark实战----(1)使用Scala开发本地测试的Spark WordCount程序
- 3000门徒内部训练绝密视频(泄密版)第10课:彻底实战详解使用Java开发Spark程序
- 第8课:彻底实战详解使用IDE开发Spark程序
- 第8课:彻底实战详解使用IDE开发Spark程序
- 第10课:底实战详解使用Java开发Spark程序学习笔记(二)
- Spark API编程动手实战-01-以本地模式进行Spark API实战map、filter和collect
- Spark一千篇旅游日记0002 之 使用idea开发spark程序
- 使用idea开发spark 实战