admin 发表于 2019-5-24 19:53:11

Spark企业级项目实战：实时流量监控系统

本项目主要采用目前大数据领域最成熟的实时计算框架Spark，它是目前主流企业在实时计算方向采用的主流框架。本项目使用了Spark技术生态栈中的三个技术框架：SparkCore、SparkStreaming和SparkMLlib，进行道路交通实时流量监控预测系统的开发。业务实现包括数据产生模块、数据实时收集处理模块、特征数据提取模块、模型预测模块、数据存储模块。陶睿，大讲台大数据特聘讲师|国有企业智能交通大数据高级工程师，在国有企业以及一线互联网公司从事过大数据开发和架构工作，负责过多个大型大数据系统的架构和开发。精通Hadoop、Storm、Spark等大数据技术。有丰富的企业内部技术分享、技术培训和技术讲座的经验。大讲台spark培训课程大纲之Spark企业级项目实战之交通实时流量监控需求分析1、项目背景2、总体业务要求3、难点分析数据收集1、数据采集阶段技术对比2、项目中数据采集技术Kafka3、Kafka安装及基本操作4、Kafka的API操作及项目中应用数据流处理1、数据实时处理阶段技术拓展Storm2、SparkStreaming实用项目解决方案3、SparkStreaming项目中性能调优数据快速存取1、项目存储工具Redis2、Redis部署、基本操作及项目中使用模型建立1、项目机器学习算法库Mllib2、Mllib基本数据格式3、项目中实际模型选择整体解决方案设计1、产品功能的简单介绍2、架构设计3、技术选型4、部署方案5、模块设计划分部署及代码实现1、测试环境介绍2、分析模块实现1--数据产生3、分析模块实现2--数据实时收集处理模块4、分析模块实现3--特征数据提取及模型预测5、分析模块实现4--模型预测6、项目调优项目总结
下载地址：**** Hidden Message *****

liaozhiying 发表于 2019-5-25 10:34:12

6666666666666

ilumanxi 发表于 2019-5-26 14:08:45

Spark企业级项目实战：实时流量监控系统

huangwei8ku 发表于 2019-5-26 18:17:13

666666666666666666

498088949 发表于 2019-6-2 10:34:03

看看先！！！！

snoopy 发表于 2019-6-8 12:26:45

       
参与/回复主题关闭
RE: Spark企业级项目实战：实时流

davidcedric 发表于 2019-6-9 09:47:21

6666666666666666

owenbush 发表于 2019-6-16 23:37:09

66666666666666

khalil 发表于 2019-8-15 12:15:32

66666666666666666666666666666666

shala0616 发表于 2019-9-23 02:16:39

park企业级项目实战：实时流量监控系统 [
页: [1] 2
查看完整版本: Spark企业级项目实战：实时流量监控系统