课程目录

• 视频
• 01_新能源汽车课程介绍
• 02_新能源汽车数仓概述
• 03_数仓需求介绍及框架选择
• 04_数仓架构介绍
• 05_服务器选型介绍
• 06_集群资源规划介绍
• 07_采集数据格式介绍
• 08_克隆准备3台虚拟机
• 09_分发脚本和免密登录配置
• 100_dolphinSchedule的定时和传参功能
• 101_dolphinSchedule的依赖资源和告警功能介绍
• 102_新数据的全流程调度
• 103_fineBI的安装部署和启动
• 104_fineBI演示样例简单表格实现
• 105_fineBI的钻取联动和过滤功能
• 106_fineBI实战展示新能源汽车指标
• 107_新能源数仓整体内容回顾
• 10_jdk安装部署
• 11_环境变量配置介绍
• 12_节点进程查看脚本介绍
• 13_zookeeper的安装部署和使用
• 14_hadoop配置介绍
• 15_hadoop高可用配置及群起脚本
• 16_hdfs的多目录配置和集群平衡
• 17_hadoop的参数调优
• 18_kafka的安装部署
• 19_kafka命令行简单介绍
• 20_flume的安装及内存的调整
• 21_mysql的安装部署
• 22_mysql远程软件连接的问题解决
• 23_采集数据模拟生成展示
• 24_日志采集架构及组件选择
• 25_采集日志flume的配置文件编写
• 26_日志采集flume的测试及脚本编写
• 27_消费flume的配置编写
• 28_消费flume的拦截器编写
• 29_消费flume日志演示
• 30_维度数据同步策略选择
• 31_Datax同步工具简单介绍
• 32_Datax架构原理介绍
• 33_Datax基础实现同步任务
• 34_Datax使用传参演示
• 35_Datax的并发控制和内存修改
• 36_使用Datax完成维度表同步
• 37_数仓建模模型介绍
• 38_维度模型事实表和维度表介绍
• 39_数仓环境搭建_hive的基础配置
• 40_hive替换为spark引擎
• 41_修改yarn对应am的内存限制
• 42_配置数仓运行环境
• 43_业务场景模拟_回顾采集通道
• 44_业务场景模型_生成0502数据
• 45_数仓分层介绍
• 46_ods_hive映射hdfs成为表格介绍
• 47_ods_hive函数get_json_object解析json数据
• 48_ods_hive的serde简单介绍
• 49_ods_hive使用serde解析json数据
• 50_ods_日志表格建表介绍
• 51_ods_hive导入日志表格数据演示
• 52_ods_汽车信息表数据导入
• 53_ods_数据导入脚本基础内容编写
• 54_ods_数据导入脚本使用演示
• 55_dim层维度表回顾
• 56_dim层汽车信息维度表导入
• 57_dim离线维度编码表导入
• 58_dim层脚本数据导入
• 59_dwd_事实表建模理论分析
• 60_dwd_电动模式行驶日志事实表装载
• 61_dwd_混动模式和新能源燃料模式行驶日志事实表装载
• 62_dwd_充电日志事实表装载
• 63_dwd_行驶充电和故障记录日志事实表装载
• 64_dwd_电机日志事实表
• 65_dwd_数据导入首日脚本编写
• 66_dwd_数据导入脚本使用
• 67_dws_搭建建模分析
• 68_dws_纯电模式单次行程汇总表
• 69_dws_纯电模式单次行程数据装载
• 70_dws_单次充电聚合表数据导入
• 71_dws_单次汇总数据脚本装载
• 72_dws_最近1日里程聚合数据导入
• 73_dws_告警单日汇总和电机信息单日汇总数据导入
• 74_dws_单日电池组情况汇总基础数据读取
• 75_dws_单日电池组每日汇总数据装载
• 76_dws_每日聚合脚本数据装载
• 77_ads_创建表格特点介绍
• 78_ads_每月里程统计数据导入
• 79_ads_最近7天里程汇总数据导入
• 80_ads_不同类型汽车每月行程统计
• 81_ads_告警主题每月汇总
• 82_ads_温控主题每月汇总
• 83_ads_能耗主题表格字段介绍
• 84_ads_能耗主题充电指标计算
• 85_ads_能耗主题旅次消耗计算
• 86_ads_能耗主题最近100km能耗计算
• 87_ads_能耗主题数据导入
• 88_ads_汽车类型平均能耗计算
• 89_ads_数据脚本导入
• 90_数据导出建表语句
• 91_数据导出样例演示
• 92_脚本工具自动化生成datax的配置文件
• 93_使用脚本完成datax数据导出
• 94_dolphinScheduler架构介绍
• 95_dolphinSchedule安装配置文件编写
• 96_dolphinSchedule元数据配置及安装
• 97_dolphinSchedule启动停止命令介绍
• 98_dolphinSchedule管理用户介绍
• 99_dolphinSchedule简单任务的执行演示
• 文件名.bat
• 文件名.txt
• 笔记
• 资料