课程目录

• 视频
• 01-课程内容介绍与数仓概念
• 02-数据仓库架构
• 03-技术选型
• 04-系统数据流程设计
• 05-项目需求分析
• 06-服务器选型
• 07-集群规模
• 08-资源规划设计
• 09-安装虚拟机
• 10-ssh免密
• 100-dim层每日数据加载脚本
• 101-dwd层设计要点
• 102-下单事务型事实表建表
• 103-下单事实表首日数据加载
• 104-下单事实表每日数据加载
• 105-支付成功事实表首日数据加载
• 106-支付成功事实表每日数据加载
• 107-退单事实表首日数据加载
• 108-退单事实表每日数据加载
• 109-退款成功事实表首日数据加载
• 11-分发脚本
• 110-退款成功每日数据加载
• 111-评价事实表首日数据加载
• 112-评价事实表每日数据加载
• 113-dwd首日数据加载脚本
• 114-dwd每日数据加载脚本
• 115-dws设计要点
• 116-交易域店铺粒度用户下单最近 1 日汇总表
• 117-交易域店铺粒度用户支付成功最近 1 日汇总表
• 118-交易域店铺粒度退款成功最近 1 日汇总表
• 119-交易域营销活动粒度用户下单最近 1 日汇总表
• 12-安装jdk
• 120-交易域菜品规格粒度用户下单最近 1 日汇总表
• 121-交易域套餐粒度用户下单最近 1 日汇总表
• 122-互动域菜品粒度用户评价最近 1 日汇总表
• 123-互动域套餐粒度用户评价最近 1 日汇总表
• 124-互动域店铺粒度用户评价最近 1 日汇总表
• 125-dws 1d表首日数据加载脚本
• 126-dws 1d表每日数据加载脚本
• 127-交易域店铺粒度用户下单最近 n 日汇总表
• 128-交易域店铺粒度用户支付成功最近 n 日汇总表
• 129-交易域店铺粒度退款成功最近 n 日汇总表
• 13-环境变量配置说明
• 130-交易域营销活动粒度用户下单最近 n 日汇总表
• 131-交易域菜品规格粒度用户下单最近 n 日汇总表
• 132-易域套餐粒度用户下单最近 n 日汇总表
• 133-互动域菜品粒度用户评价最近 n 日汇总表
• 134-互动域套餐粒度用户评价最近 n 日汇总表
• 135-互动域店铺粒度用户评价最近 n 日汇总表
• 136-dws nd数据加载脚本
• 137-各店铺交易统计
• 138-各经营模式交易统计
• 139-各省份交易统计
• 14-餐饮业务简介
• 140-各城市交易统计
• 141-各时段交易统计
• 142-订单减免统计
• 143-各店铺订单减免统计
• 144-优惠分摊统计
• 145-营销活动优惠统计
• 146-菜品规格交易统计
• 147-菜品交易统计
• 148-菜品分类交易统计
• 149-菜品交易分时统计
• 15-餐饮系统表结构说明
• 150-套餐交易统计
• 151-套餐交易分时统计
• 152-最近 1 日菜品规格活动减免（下单）金额Top10
• 153-最近 1 日菜品规格活动参与订单数Top10
• 154-最近 1 日店铺活动减免（下单）金额Top10
• 155-最近 1 日店铺活动参与订单数Top10
• 156-最近 1 日店铺下单金额Top10
• 157-最近 1 日加盟店与直营店下单金额Top10
• 158-菜品评价统计
• 159-套餐评价统计
• 16-安装mysql以及模拟生成数据
• 160-店铺评价统计
• 161-ads数据加载脚本
• 162-建库建表
• 163-hdfs数据导入mysql案例演示
• 164-ads数据同步脚本
• 165-dolphinscheduler简介
• 166-部署模式
• 167-dolphinscheduler安装
• 168-安全中心配置
• 169-工作流的定义与执行
• 17-模拟生成数据脚本
• 170-定时调度执行
• 171-局部参数
• 172-全局参数
• 173-传递参数
• 174-参数优先级
• 175-内置参数
• 176-引用依赖资源
• 177-工作流告警
• 178-重跑和恢复失败
• 179-生成新数据
• 18-建模工具使用
• 180-数仓工作流调度
• 181-finebi安装与数据源的配置
• 182-finebi启动脚本
• 183-finebi数据可视化
• 184-数仓总结
• 19-集群批量命令执行脚本
• 20-安装hadoop
• 21-hadoop启动脚本
• 22-hadoop项目经验之存储多目录
• 23-hadoop项目经验之数据均衡
• 24-hadoop项目经验之参数调优
• 25-安装zookeeper
• 26-zk启动脚本
• 27-zk客户端常用指令
• 28-安装kafka
• 29-kafka启动脚本
• 30-kafka常用指令之topic相关
• 31-kafka常用指令之生产者和消费者相关
• 32-flume安装和项目经验
• 33-maxwell简介
• 34-maxwell原理
• 35-安装maxwell
• 36-maxwell启动脚本
• 37-maxwell使用
• 38-同步策略介绍与选择
• 39-同步工具介绍
• 40-datax简介
• 41-datax架构原理
• 42-datax安装
• 43-datax任务提交和配置文件格式说明
• 44-同步mysql数据到hdfs案例之tableMode模式
• 45-同步mysql数据到hdfs案例之querysql模式
• 46-同步hdfs数据到mysql案例
• 47-datax传参
• 48-datax优化之速度控制
• 49-datax优化之内存调整
• 50-datax配置文件生成
• 51-全量表数据同步脚本
• 52-增量数据flume配置
• 53-增量数据拦截器与采集
• 54-增量同步时间问题
• 55-增量首日同步脚本
• 56-增量数据flume启动脚本
• 57-安装hive
• 58-hive中文乱码问题
• 59-快餐数仓项目简介
• 60-数仓的概念
• 61-数仓架构
• 62-数仓建模的意义
• 63-ER模型
• 64-维度模型
• 65-事务型事实表设计与不足
• 66-周期型快照事实表
• 67-累积型快照事实表
• 68-维度表设计
• 69-规范化和反规范化
• 70-维度变化
• 71-多值维度和多值属性
• 72-数据仓库的分层
• 73-数仓的构建流程
• 74-数据调研
• 75-明确数据域
• 76-构建业务总线矩阵
• 77-明确统计指标
• 78-维度模型和汇总模型设计
• 79-hive引擎介绍和兼容性说明
• 80-hive on spark搭建
• 81-ApplicationMaster资源比例调整
• 82-datagrip工具使用
• 83-模拟生成数据
• 84-hive常用问题
• 85-ods层设计要点
• 86-ods全量数据建表演示
• 87-hive复杂数据类型回顾
• 88-json数据建表示范
• 89-ods层增量表字段显示异常问题
• 90-ods层数据加载脚本
• 91-dim层设计要点
• 92-顾客维度表首日数据加载
• 93-顾客维度表每日数据加载
• 94-菜品维度表数据加载
• 95-套餐维度表数据加载
• 96-优惠活动维度表数据加载
• 97-行政区划维度表数据加载
• 98-店铺维度表数据加载
• 99-dim层首日数据加载脚本
• 笔记
• 代码
• 资料