本套课程来自七月在线-大数据工程师集训营2022年

本大数据集训营从Hadoop基础讲解，贯穿数据采集、传输、存储、计算、展示等各个环节，着重讲解企业中如何使用spark、MapReduce、hive、flume、sqoop等各个组件，并附有经典企业案例讲解，案例均来自一线互联网工业项目

本套课程文件总计9.7G

课程目录

• 01、第一阶段大数据与Hadoop 基础(HDFS与YARN)
• 01、在线视频：大数据与Hadoop生态介绍
• 02、在线视频：大数据存储系统HDFS
• 03、在线视频：分布式资源管理框架Yarn
• 04、在线视频：分布式计算框架MapReduce与Hive SQL
• 02、第二阶段数据采集工具与消息队列Kafka
• 01、在线视频：数据收集工具Flume、Beats介绍与原理
• 02、在线视频：数据库同步工具Alibaba Canal介绍与原理
• 03、在线视频：高吞吐消息队列Kafka介绍（一）
• 04、在线视频：分布式数据库Hbase
• 05、在线视频：数据采集工具与消息队列实战
• 03、第三阶段 Spark流式计算实践
• 01、在线视频：spark技术栈发展概述
• 02、在线视频：流式计算简介及spark streaming
• 03、在线视频：流式计算实战
• 04、在线视频：spark运行模式及原理
• 04、第四阶段深入Spark SQL与核心原理
• 01、在线视频：Spark sql讲解
• 02、在线视频：Spark集群监控与问题排查
• 03、在线视频：Spark core核心讲解与Spark性能调优
• 04、在线视频：使用Spark开发一套通用的流和批计算引擎
• 05、第五阶段 企业级项目：设计与搭建基于Hive、Presto的数据仓库与OLAP分析引擎
• 01、在线视频：数据仓库基础
• 02、在线视频：OLAP分析场景下的技术架构
• 03、在线视频：数据仓库的数据治理与任务调度
• 06、第六阶段 企业级项目：Flink实战——直播、短视频APP用户行为分析
• 01、在线视频：Flink基础介绍
• 02、在线视频：Flink核心特性讲解
• 03、在线视频：开发用户行为分析的Flink程序
• 07、第七阶段 企业级项目：ELK+Spark实现一个错误日志监控(搜索、分析、报警)平台
• 01、在线视频：日志平台介绍及Elasticsearch基础
• 02、在线视频：错误日志平台搭建
• 03、在线视频：日志平台架构优化与Spark集成
• 08、八阶段 大数据求职面试辅导
• 01、在线视频：大数据面试求职准备工作讲解
• 02、在线视频：常见大数据面试题目解析