Spark企业级实战项目:道路交通实时流量监控预测系统
2018-03-11 13:33
5767 查看
Spark企业级实战项目:道路交通实时流量监控预测系统
课程大纲:
需求分析
1、项目背景
2、总体业务要求
3、难点分析
数据收集
1、数据采集阶段技术对比
2、项目中数据采集技术Kafka
3、Kafka安装及基本操作
4、Kafka的API操作及项目中应用
数据流处理
1、数据实时处理阶段技术拓展Storm
2、Spark Streaming实用项目解决方案
3、Spark Streaming项目中性能调优
数据快速存取
1、项目存储工具Redis
2、Redis部署、基本操作及项目中使用
模型建立
1、项目机器学习算法库Mllib
2、Mllib基本数据格式
3、项目中实际模型选择
整体解决方案设计
1、产品功能的简单介绍
2、架构设计
3、技术选型
4、部署方案
5、模块设计划分
部署及代码实现
1、测试环境介绍
2、分析模块实现1--数据产生
3、分析模块实现2--数据实时收集处理模块
4、分析模块实现3--特征数据提取及模型预测
5、分析模块实现4--模型预测
6、项目调优
详情请交流 QQ 709639943 还有更多课程可以交流哦
课程大纲:
需求分析
1、项目背景
2、总体业务要求
3、难点分析
数据收集
1、数据采集阶段技术对比
2、项目中数据采集技术Kafka
3、Kafka安装及基本操作
4、Kafka的API操作及项目中应用
数据流处理
1、数据实时处理阶段技术拓展Storm
2、Spark Streaming实用项目解决方案
3、Spark Streaming项目中性能调优
数据快速存取
1、项目存储工具Redis
2、Redis部署、基本操作及项目中使用
模型建立
1、项目机器学习算法库Mllib
2、Mllib基本数据格式
3、项目中实际模型选择
整体解决方案设计
1、产品功能的简单介绍
2、架构设计
3、技术选型
4、部署方案
5、模块设计划分
部署及代码实现
1、测试环境介绍
2、分析模块实现1--数据产生
3、分析模块实现2--数据实时收集处理模块
4、分析模块实现3--特征数据提取及模型预测
5、分析模块实现4--模型预测
6、项目调优
详情请交流 QQ 709639943 还有更多课程可以交流哦
相关文章推荐
- 道路交通实时流量监控预测系统
- 道路交通实时流量监控预测系统
- 项目实战_Python.编写一个高性能可扩展支持自定义的插件式监控系统? 推荐
- 大数据Spark“蘑菇云”项目实战第63课: 广告点击系统高可用性和性能优化 checkpoint wal driver高可用 并行度配置
- Dude 4 beat3 组建网络拓扑、实时流量监控系统
- Spark Streaming实时流处理项目实战笔记04
- Dude 4 beat3 组建网络拓扑、实时流量监控系统
- Spark 实战, 第 2 部分:使用 Kafka 和 Spark Streaming 构建实时数据处理系统
- 项目实战_Python.利用Python+Flask编写一个高性能实时主动监控平台?
- Ntopng 网络流量实时监控系统搭建
- 数据挖掘实战,实时推荐系统实战,电视收视率项目实战,实时流统计项目实战
- Spark项目:知名手机厂商用户行为实时分析系统
- Spark Streaming实时流处理项目实战笔记03
- SparkStreaming项目实战系列——1.实时流概述
- 汽车实时监控系统项目濒临失败和延期的经验分析
- Spark Streaming实时流处理项目实战笔记01
- 在redhat7.2下面安装iftop,监控系统网卡的实时流量
- Java基础(十六)——项目实战——交通灯管理系统
- 项目实战5—企业级缓存系统varnish应用与实战
- 项目-基于视频压缩的实时监控系统--tiny6410