Spark+ClickHouse实战企业级数据仓库 -
**** Hidden Message ***** Spark+ClickHouse实战企业级数据仓库,进军大厂必备掌握数仓构建,完善技术体系,轻松掌握高薪技能
现阶段的数据开发领域,数据仓库作为企业战略决策的 大脑 ,地位日益凸显,对数仓技术的掌握程度也成了大厂面试必考的一环。本课程结合ClickHouse+Spark 这一对数据处理的 黄金搭档 ,选取 大数据量企业数据仓库 这一典型场景,实战大数据量下数仓的建模、设计与调优等实用技巧,快速掌握ClickHouse+Spark核心技能,为晋级大数据架构师铺路!
结合热门技术,实战企业级数仓项目,轻松掌握高薪数据工程师必备技能
全方位提升项目开发经验,上手 ClickHouse+Spark,实现个人的成长蜕变
第1章 从0到1搭建项目开发环境,快速上手大数据开发
本章将从0到1搭建大数据开发环境,通过IDEA+Maven构建多module项目,实现源码、启动脚本、配置等自动构建打包。
第2章 项目关键技术准备,学习通用的数据处理技术
本章对项目所用到关键技术进行封装,通过Spark UDF整合IP地址相关的转换功能、二分查找算法、通用Grok数据解析器等,并通过rewrite方式修改Grok组件源码,学习源码整合的思路。
第3章 项目数据准备,操练基于Spark的数据开发与优化
本章主要是基于Spark,模拟生成项目所需要的基础数据和安全访问日志数据,操练基于Spark对数据进行处理与优化技术。
第4章 初识OLAP数仓架构
本章主要介绍构建数仓的主流数据技术架构,以及基于ClickHouse的OLAP架构相比典型大数据架构的优势。
第5章 详解数据仓库基础理论,掌握数据仓库的实施流程
本章介绍数仓的基础理论、数据仓库的架构以及建模方法。基于当前主流的维度建模,学习数据仓库的构建流程以及分层模型的划分。
查看完整目录
答疑专区+技术社区
连百度谷歌都搜不到的问题,在这里讲
师都将耐心详细解答,更有小伙伴一起
交流互动,共同进步。
课程全套代码下载
提供课程全套源代码下载,包含:
全套组件封装镜像、私有仓库、各个服
务的镜像、项目源代码。
独家“动态”教辅材料
丰富的专属教辅资料上传更新,通过课程
教案、原理图解、技术文档、演示案例等
各种教材,保障你的学习效果。
实用电子文档
部分简单内容以图文形式呈现,与视频
相配合,既保障学习效果,又提高了学
习效率。
**** Hidden Message *****
页:
[1]