基于大数据的智慧学成项目课程 | 完结

智慧学成项目是对在线教育业务进行大数据统计分析的系统，采用企业级ETL规范化流程、数据仓库建模思想，按课程、用户等不同维度进行数据分析。采用Hadoop、Spark技术栈开发，提供数据仓库、ETL、离线及实时分析等解决方案。

〖资源截图〗:

〖资源目录〗:

• ├──01.第一章 智慧学成-项目介绍环境搭建
• | ├──01-项目介绍-学习目标&项目背景和概述.mp4 16.35M
• | ├──02-项目介绍-业务流程.mp4 12.02M
• | ├──03-项目介绍-功能模块.mp4 15.13M
• | ├──04-项目介绍-技术架构.mp4 18.88M
• | ├──05-环境搭建-学习目标&CDH组件介绍.mp4 9.55M
• | ├──06-环境搭建-CDH环境搭建.mp4 50.47M
• | ├──07-环境搭建-配置hosts.mp4 19.07M
• | ├──08-环境搭建-配置Maven.mp4 12.17M
• | ├──09-环境搭建-IDEA环境配置.mp4 14.23M
• | ├──10-环境搭建-导入Scala基础工程&基础工程介绍.mp4 21.27M
• | ├──11-环境搭建-wordcount代码编写及idea代码测试.mp4 44.99M
• | ├──12-环境搭建-wordcount任务提交到集群执行.mp4 33.31M
• | ├──13-Zeppelin简介、Zeppelin调式Spark程序.mp4 28.11M
• | ├──14-Hue简介、Hue操作hive及hdfs.mp4 24.03M
• | ├──15-数据仓库-学习目标、数据仓库介绍.mp4 16.71M
• | ├──16-数据仓库-数据仓库的特点.mp4 14.22M
• | ├──17-数据仓库-维度分析.mp4 16.56M
• | ├──18-数据仓库-数据仓库建模.mp4 32.75M
• | └──19-数据仓库-Hive创建数据仓库.mp4 18.85M
• ├──02.第二章 智慧学成-数据仓库与ETL
• | ├──01-ETL-学习目标.mp4 3.72M
• | ├──02-ETL-ETL介绍.mp4 8.88M
• | ├──03-ETL-课程访问量需求分析-.mp4 34.56M
• | ├──04-ETL-采集系统介绍.mp4 5.25M
• | ├──05-ETL-采集系统搭建.mp4 36.91M
• | ├──06-ETL-采集系统-测试采集课程访问量.mp4 8.06M
• | ├──07-ETL-NiFi介绍.mp4 20.41M
• | ├──08-ETL-快速入门.mp4 22.47M
• | ├──09-ETL-维度数据采集-维度介绍-.mp4 5.09M
• | ├──10-ETL-维度数据采集-导入学成在线业务数据.mp4 8.00M
• | ├──11-ETL-维度数据采集-导入NiFi源码&执行采集.mp4 23.94M
• | ├──12-ETL-维度数据采集-注意事项-NiFi采集乱码处理.mp4 12.22M
• | ├──13-ETL-维度数据采集-区域维度原文件上传HDFS&spark读取文件.mp4 20.69M
• | ├──14-ETL-维度数据采集-区域维度原文件数据与实体映射.mp4 21.91M
• | ├──15-ETL-维度数据采集-区域维度字段关联及区域维度数据入库.mp4 46.12M
• | └──16-ETL-维度数据采集-区域维度-注意事项：winutils配置.mp4 34.34M
• ├──03.第三章 智慧学成-课程分析
• | ├──1.数据清洗
• | | ├──01-ETL-数据清洗-课程访问量事实表字段介绍&清洗逻辑介绍.mp4 11.72M
• | | ├──02-ETL-数据清洗-课程访问量清洗-获取维度数据&原始数据.mp4 27.06M
• | | ├──03-ETL-数据清洗-课程访问量清洗-过滤机器人&关联维度.mp4 42.50M
• | | ├──04-ETL-数据清洗-课程访问量清洗-去重&保存到数据仓库.mp4 24.25M
• | | ├──05-ETL-数据清洗-课程访问量清洗-测试.mp4 54.00M
• | | ├──06-ETL-数据清洗-课程访问量清洗-使用NiFi生产数据并测试.mp4 55.81M
• | | ├──07-课程分析-学习目标.mp4 11.72M
• | | ├──08-课程分析-课程访问量分析-功能概述&统计分析步骤.mp4 6.81M
• | | ├──09-课程分析-课程访问量分析-步骤1：读取课程访问量事实表数据.mp4 16.47M
• | | ├──10-课程分析-课程访问量分析-步骤2：课程访问量统计求和.mp4 19.25M
• | | ├──11-课程分析-课程访问量分析-步骤3：课程访问量统计结果保存数据仓库.mp4 35.62M
• | | ├──12-课程分析-课程访问量分析-使用NiFi将课程访问量分析结果同步到MySQl.mp4 16.50M
• | | ├──13-课程分析-课程访问量分析-集成测试概述.mp4 7.72M
• | | ├──14-课程分析-课程访问量分析-集成测试-数据清洗统计分析NiFi调度.mp4 34.38M
• | | ├──15-课程分析-课程访问量分析-集成测试-联动（清洗、统计分析、同步到业务库）配置并测试.mp4 30.59M
• | | ├──16-业务报表系统搭建-Web前端使用说明&Yapi使用说明.mp4 21.84M
• | | └──17-业务报表系统搭建-使用业务后台接口展示业务报表.mp4 20.78M
• | ├──2.课程分析
• | | ├──01-课程分析-课程购买量-需求分析.mp4 7.91M
• | | ├──02-课程分析-课程购买量-采集字段及存储分析.mp4 19.78M
• | | ├──03-课程分析-课程购买量-MySQL采集注意事项.mp4 10.66M
• | | ├──04-课程分析-课程购买量-NiFi采集MySQL配置.mp4 7.38M
• | | ├──05-课程分析-课程购买量-测试NiFi采集MySQL.mp4 44.22M
• | | ├──06-课程分析-课程购买量-NiFi生产订单数据保存到MySQL&并进行实时采集.mp4 18.94M
• | | ├──07-课程分析-课程购买量-数据清洗-DWD（事实表）结构分析.mp4 9.12M
• | | ├──08-课程分析-课程购买量-数据清洗-用户维度采集.mp4 7.97M
• | | ├──09-课程分析-课程购买量-DWD代码-维度数据获取.mp4 9.94M
• | | ├──10-课程分析-课程购买量-DWD代码-事实表数据封装.mp4 42.62M
• | | ├──11-课程分析-课程购买量-DWD代码-保存到数据仓库.mp4 9.94M
• | | ├──12-课程分析-课程购买量-DWD代码-测试清洗入库.mp4 37.34M
• | | ├──13-课程分析-课程购买量-DWM层结构分析.mp4 11.81M
• | | ├──14-课程分析-课程购买量-DWM代码-轻度聚合封装数据.mp4 43.25M
• | | ├──15-课程分析-课程购买量-DWM代码-保存到数据仓库&测试入库.mp4 24.91M
• | | ├──16-课程分析-课程购买量-统计分析.mp4 39.25M
• | | ├──17-课程分析-课程购买量-使用NiFi将业务数据从数据仓库同步到MySQL.mp4 12.16M
• | | ├──18-课程分析-课程购买量-集成测试-概述&NiFi调度数据清洗分析任务.mp4 39.22M
• | | └──19-课程分析-课程购买量-集成测试-联动配置&整流程测试.mp4 29.06M
• | └──3.热门学科排名
• | | ├──01-热门学科排名-需求分析.mp4 14.81M
• | | ├──02-热门学科排名-业务报表系统字段分析.mp4 14.59M
• | | ├──03-热门学科排名-采集字段及存储分析.mp4 9.97M
• | | ├──04-热门学科排名-NiFi采集用户选课数据&测试.mp4 19.69M
• | | ├──05-热门学科排名-NiFi生产用户选课数据保存到MySQL&并进行实时采集.mp4 20.62M
• | | ├──06-热门学科排名-用户选课DWD层字段说明&清洗分析.mp4 6.72M
• | | ├──07-热门学科排名-用户选课-DWD代码-获取维度数据&用户选课原始数据.mp4 16.62M
• | | ├──08-热门学科排名-用户选课-DWD代码-事实表数据封装&保存到数据仓库.mp4 16.81M
• | | ├──09-热门学科排名-用户选课-DWD代码-测试清洗入库.mp4 29.00M
• | | ├──10-热门学科排名-统计分析概述&课程分类维度采集.mp4 22.34M
• | | ├──11-热门学科排名-统计分析-销售量-周-统计分析步骤.mp4 8.19M
• | | ├──12-热门学科排名-统计分析-销售量-周-代码-获取周区间日期.mp4 12.97M
• | | ├──13-热门学科排名-统计分析-销售量-周-代码-根据日期获取数据并计算涨幅.mp4 38.91M
• | | ├──14-热门学科排名-统计分析-销售量-周-代码-维度关联&保存到数据仓库.mp4 31.81M
• | | ├──15-热门学科排名-统计分析-销售量-周-代码-抽取工具类&测试入库.mp4 16.50M
• | | ├──16-热门学科排名-统计分析-销售量-月-统计分析步骤及代码编写.mp4 23.97M
• | | ├──17-热门学科排名-统计分析-销售量-月-测试入库.mp4 16.38M
• | | ├──18-热门学科排名-统计分析-学生人数-周-统计分析步骤.mp4 6.41M
• | | ├──19-热门学科排名-统计分析-学生人数-周-代码-获取周区间&获取数据&计算涨幅.mp4 40.38M
• | | ├──20-热门学科排名-统计分析-学生人数-周-代码-维度关联&保存到数据仓库.mp4 20.97M
• | | ├──21-热门学科排名-统计分析-学生人数-周-代码-抽取工具类&测试入库.mp4 18.69M
• | | ├──22-热门学科排名-统计分析-学生人数-月-统计分析步骤&代码编写.mp4 15.34M
• | | ├──23-热门学科排名-统计分析-学生人数-月-测试入库.mp4 13.69M
• | | ├──24-热门学科排名-统计分析-销售额-周-统计分析步骤&代码编写.mp4 16.09M
• | | ├──25-热门学科排名-统计分析-销售额-周-测试入库.mp4 14.34M
• | | ├──26-热门学科排名-统计分析-销售额-月-统计分析步骤&代码编写.mp4 14.97M
• | | ├──27-热门学科排名-统计分析-销售额-月-测试入库.mp4 16.75M
• | | ├──28-热门学科排名-统计分析-使用NiFi将业务数据从数据仓库同步到MySQL.mp4 18.97M
• | | ├──29-热门学科排名-集成测试-配置NiFi调度数据清洗分析任务.mp4 22.09M
• | | ├──30-热门学科排名-集成测试-测试NiFi调度数据清洗分析.mp4 17.44M
• | | ├──31-热门学科排名-集成测试-联动配置&测试.mp4 34.84M
• | | └──32-热门学科排名-集成测试-报表系统Web展示.mp4 10.84M
• ├──04.第四章 智慧学成-平板看台
• | ├──01-实时分析-学习目标.mp4 4.34M
• | ├──02-实时分析-平台看板需求分析&实时分析应用场景.mp4 13.97M
• | ├──03-实时分析-实时分析技术方案.mp4 4.84M
• | ├──04-实时分析-指标与维度分析&数据存储分析.mp4 12.66M
• | ├──05-实时分析-今日访问量-概述&数据采集.mp4 11.38M
• | ├──06-实时分析-今日访问量-统计分析逻辑.mp4 5.66M
• | ├──07-实时分析-今日访问量-代码-redis获取kafka的offset.mp4 27.16M
• | ├──08-实时分析-今日访问量-代码-SparkStreaming获取kafka中的数据.mp4 25.09M
• | ├──09-实时分析-今日访问量-代码-去重计算实时访问量&保存redis.mp4 43.84M
• | ├──10-实时分析-今日访问量-代码-redis中保存当前offset进度.mp4 34.50M
• | ├──11-实时分析-今日访问量-代码-测试.mp4 60.66M
• | ├──12-实时分析-今日访问量-NiFi生产数据&测试.mp4 22.81M
• | ├──13-实时分析-新增用户量-概述&数据采集.mp4 19.00M
• | ├──14-实时分析-新增用户量-统计分析逻辑.mp4 5.06M
• | ├──15-实时分析-新增用户量-代码-实时计算新增用户量.mp4 16.44M
• | ├──16-实时分析-新增用户量-代码-测试.mp4 14.34M
• | ├──17-实时分析-新增用户量-NiFi生产数据&测试.mp4 14.50M
• | ├──18-实时分析-今日购买量-概述&数据采集.mp4 19.94M
• | ├──19-实时分析-今日购买量-统计分析逻辑&代码.mp4 20.69M
• | ├──20-实时分析-今日购买量-代码-测试.mp4 9.72M
• | ├──21-实时分析-今日购买量-NiFi生产数据&测试.mp4 17.12M
• | ├──22-实时分析-集成测试-NiFi调度配置.mp4 20.84M
• | └──23-实时分析-集成测试-测试&web展示.mp4 18.19M
• ├──05.第五章 智慧学成-即时查询
• | ├──01即时查询-学习目标.mp4 3.06M
• | ├──02即时查询-需求分析&技术方案.mp4 13.69M
• | ├──03即时查询-技术方案-代码演示-保存-代码.mp4 37.53M
• | ├──04即时查询-技术方案-代码演示-保存-测试.mp4 10.53M
• | ├──05即时查询-技术方案-代码演示-查询-代码&测试.mp4 51.66M
• | ├──06即时查询-采集分析&存储分析.mp4 12.09M
• | ├──07即时查询-数据采集-用户学习采集.mp4 23.56M
• | ├──08即时查询-数据采集-课程视频维度采集.mp4 14.28M
• | ├──09即时查询-统计分析-概述&步骤1统计逻辑&中间表介绍.mp4 10.94M
• | ├──10即时查询-统计分析-步骤1：代码-获取原始数据.mp4 17.38M
• | ├──11即时查询-统计分析-步骤1：代码-注册udf函数.mp4 12.50M
• | ├──12即时查询-统计分析-步骤1：代码-关联相关维度&统计学习时长.mp4 36.28M
• | ├──13即时查询-统计分析-步骤1：代码-测试.mp4 21.31M
• | ├──14即时查询-统计分析-步骤2：概述.mp4 4.88M
• | ├──15即时查询-统计分析-步骤2：代码.mp4 24.59M
• | ├──16即时查询-统计分析-步骤2：测试.mp4 30.31M
• | ├──17即时查询-统计分析-使用hbase注意事项.mp4 22.78M
• | ├──18即时查询-统计分析-NiFi生产数据-配置.mp4 9.12M
• | ├──19即时查询-统计分析-NiFi生产数据-测试&代码测试.mp4 31.19M
• | ├──20即时查询-集成测试-配置.mp4 20.06M
• | └──21即时查询-集成测试-测试&web展示.mp4 27.72M
• ├──06.第六章 智慧学成-系统集成测试
• | ├──01系统集成测试-学习目标&概述.mp4 10.22M
• | ├──02系统集成测试-代码重新打包-代码修改.mp4 37.75M
• | ├──03系统集成测试-代码重新打包-上传NiFi容器.mp4 16.84M
• | ├──04系统集成测试-NiFi采集-清洗-统计分析-概述&清理业务数据.mp4 10.25M
• | ├──05系统集成测试-NiFi采集-清洗-统计分析-即时查询.mp4 22.72M
• | ├──06系统集成测试-NiFi采集-清洗-统计分析-离线分析-课程访问量.mp4 14.72M
• | ├──07系统集成测试-NiFi采集-清洗-统计分析-离线分析-课程购买量.mp4 19.19M
• | ├──08系统集成测试-NiFi采集-清洗-统计分析-离线分析-热门学科排名.mp4 22.03M
• | ├──09系统集成测试-NiFi采集-清洗-统计分析-实时分析.mp4 6.25M
• | └──10系统集成测试-NiFi采集-清洗-统计分析-web展示.mp4 9.84M
• └──07.第七章 智慧学成-项目就业指导
• | ├──01项目就业指导-就业指导概述&项目功能模块.mp4 11.88M
• | ├──02项目就业指导-技术构架&技术栈-1.mp4 13.72M
• | ├──03项目就业指导-技术构架&技术栈-2.mp4 8.62M
• | ├──04项目就业指导-数据仓库是如何设计的？.mp4 16.69M
• | ├──05项目就业指导-数据采集是如何实现的 ？.mp4 4.09M
• | ├──06项目就业指导-ETL是如何做的？.mp4 12.34M
• | ├──07项目就业指导-离线分析是如何实现的？.mp4 22.66M
• | ├──08项目就业指导-同比分析在项目的应用？.mp4 3.69M
• | ├──09项目就业指导-实时分析是如何做的？.mp4 7.19M
• | ├──10项目就业指导-如何从海量数据查询想的数据？.mp4 4.28M
• | └──11项目就业指导-项目中任务调度是如何做的？.mp4 8.66M