尚硅谷大数据项目Flink实时数仓2021年9月

 课程目录

01_尚硅谷大数据之实时数仓_数据采集层_V2.0.pdf

02_尚硅谷大数据之实时数仓_DWD层数据准备_V2.0.pdf

03_尚硅谷大数据之实时数仓_DWM层业务实现_V2.0.pdf

04_尚硅谷大数据之实时数仓_DWS层业务实现_V2.0.pdf

05_尚硅谷大数据之实时数仓_ClickHouse_V2.0.pdf

06_尚硅谷大数据之实时数仓_数据可视化接口实现_V2.0.pdf

07_尚硅谷大数据之实时数仓_优化_V2.0.pdf

尚硅谷大数据项目之Flink实时数仓.xmind

尚硅谷大数据之实时数仓_FlinkCDC.pdf

实时数仓.png

001-课程介绍.mp4

002-项目介绍.mp4

003-采集模块-课程介绍.mp4

004-采集模块-数仓分层之为什么分层.mp4

005-采集模块-数仓分层之分层明细.mp4

006-采集模块-整体需求介绍.mp4

007-采集模块-离线架构分析之Sqoop&Flume.mp4

008-采集模块-离线架构分析之FlumeTairDirSource问题提出&解决.mp4

009-采集模块-离线架构分析之Kafka.mp4

010-采集模块-离线架构分析之其他.mp4

011-采集模块-实时架构分析.mp4

012-采集模块-架构对比.mp4

013-采集模块-日志数据采集之需求分析.mp4

014-采集模块-日志数据采集之MockJar包测试.mp4

015-采集模块-日志数据采集之SpringBoot简单介绍.mp4

016-采集模块-日志数据采集之SpringBoot创建项目&简单测试.mp4

017-采集模块-日志数据采集之SpringBoot创建项目&加参数测试.mp4

018-采集模块-日志数据采集之数据落盘&写入Kafka  编码.mp4

019-采集模块-日志数据采集之数据落盘&写入Kafka  本地测试.mp4

020-采集模块-日志数据采集之数据落盘&写入Kafka  单机测试.mp4

021-采集模块-日志数据采集之Nginx  介绍.mp4

022-采集模块-日志数据采集之Nginx  安装&启动.mp4

023-采集模块-日志数据采集之Nginx  配置负载均衡&测试.mp4

024-采集模块-日志数据采集之集群测试.mp4

025-采集模块-业务数据采集之建库&建表.mp4

026-采集模块-业务数据采集之FlinkCDC  什么是CDC&对比.mp4

027-采集模块-业务数据采集之FlinkCDC  介绍.mp4

028-采集模块-业务数据采集之FlinkCDC  DataStream方式  编码.mp4

029-采集模块-业务数据采集之FlinkCDC  DataStream方式  测试.mp4

030-采集模块-业务数据采集之FlinkCDC  DataStreamAPI  设置CK&打包&开启集群.mp4

031-采集模块-业务数据采集之FlinkCDC  DataStreamAPI  打包进行断点续传测试.mp4

032-采集模块-业务数据采集之FlinkCDC  FlinkSQLAPI  编码&测试.mp4

033-采集模块-业务数据采集之FlinkCDC  DataStreamAPI  自定义反序列化器  格式说明.mp4

034-采集模块-业务数据采集之FlinkCDC  DataStreamAPI  自定义反序列化器  编码完成.mp4

035-采集模块-业务数据采集之FlinkCDC  DataStreamAPI  自定义反序列化器  代码测试.mp4

036-采集模块-业务数据采集之FlinkCDC  DataStreamAPI&FlinkSQL对比.mp4

037-采集模块-业务数据采集之Maxwell  安装说明&测试.mp4

038-采集模块-业务数据采集之Canal  安装说明&测试.mp4

039-采集模块-业务数据采集之CDC对比.mp4

040-采集模块-业务数据采集之读取MySQL数据并写入Kafka  编码.mp4

041-采集模块-业务数据采集之读取MySQL数据并写入Kafka  测试.mp4

042-DWD&DIM-课程介绍.mp4

043-DWD&DIM-行为数据  需求分析.mp4

044-DWD&DIM-行为数据  思路整理&消费Kafka数据.mp4

045-DWD&DIM-行为数据  将数据转换为JSON对象.mp4

046-DWD&DIM-行为数据  新老用户校验.mp4

047-DWD&DIM-行为数据  侧输出流&写入Kafka.mp4

048-DWD&DIM-行为数据  测试.mp4

049-DWD&DIM-业务数据之需求分析.mp4

050-DWD&DIM-业务数据之代码逻辑梳理.mp4

051-DWD&DIM-业务数据之代码编写  消费数据并过滤.mp4

052-DWD&DIM-业务数据之代码编写  读取配置表创建广播流.mp4

053-DWD&DIM-业务数据之代码编写  配置表字段分析&建表&JavaBean.mp4

054-DWD&DIM-业务数据之代码编写  开启配置表Binlog并测试.mp4

055-DWD&DIM-业务数据之代码编写  连接主流&广播流并分析业务逻辑.mp4

056-DWD&DIM-业务数据之代码编写  创建TableProcessFunction并初始化相关参数.mp4

057-DWD&DIM-业务数据之代码编写  处理广播流数据  解析数据&建表.mp4

058-DWD&DIM-业务数据之代码编写  处理广播流数据  写入状态.mp4

059-DWD&DIM-业务数据之代码编写  处理主流数据  读取状态&过滤字段.mp4

060-DWD&DIM-业务数据之代码编写  处理主流数据  补充SinkTable&分流.mp4

061-DWD&DIM-业务数据之代码编写  检查代码.mp4

062-DWD&DIM-业务数据之代码编写  测试准备.mp4

063-DWD&DIM-业务数据之代码编写  测试.mp4

064-DWD&DIM-业务数据之代码编写  将数据写入HBase  编码.mp4

065-DWD&DIM-业务数据之代码编写  将数据写入Kafka  编码.mp4

066-DWD&DIM-业务数据之整体测试  环境准备.mp4

067-DWD&DIM-业务数据之整体测试  测试完成.mp4

068-ODS&DWD&DIM-小总结.mp4

069-ODS&DWD&DIM-SQL分享  需求说明&建表&导数据.mp4

070-ODS&DWD&DIM-SQL分享  方案一.mp4

071-ODS&DWD&DIM-SQL分享  方案二.mp4

072-ODS&DWD&DIM-SQL分享  HiveOnSpark  Bug说明.mp4

073-DWM层-需求分析.mp4

074-DWM层-访客UV  需求分析.mp4

075-DWM层-访客UV  代码编写  消费数据并转换为JSON对象.mp4

076-DWM层-访客UV  代码编写  过滤数据.mp4

077-DWM层-访客UV  代码编写  设置状态超时时间防止状态过大.mp4

078-DWM层-访客UV  代码测试.mp4

079-DWM层-跳出明细  需求分析.mp4

080-DWM层-跳出明细  代码编写.mp4

081-DWM层-跳出明细  代码测试.mp4

082-DWM层-跳出明细  测试.mp4

083-DWM层-跳出明细  CEP 循环模式.mp4

084-DWM层-订单宽表  需求分析.mp4

085-DWM层-订单宽表  双流JOIN  官方文档说明.mp4

086-DWM层-订单宽表  双流JOIN  代码编写.mp4

087-DWM层-订单宽表  双流JOIN  代码测试.mp4

088-DWM层-订单宽表  代码编写  消费Kafka数据&转换JavaBean&提取事件时间.mp4

089-DWM层-订单宽表  代码编写  订单与订单明细表双流JOIN.mp4

090-DWM层-订单宽表  代码测试  准备工作.mp4

091-DWM层-订单宽表  代码测试  测试完成.mp4

092-DWM层-订单宽表  关联维度  思路梳理.mp4

093-DWM层-订单宽表  关联维度  JDBCUtil  返回值&参数说明.mp4

094-DWM层-订单宽表  关联维度  JDBCUtil  查询&封装泛型对象.mp4

095-DWM层-订单宽表  关联维度  JDBCUtil  测试.mp4

096-DWM层-订单宽表  关联维度  DimUtil封装&优化的必要性.mp4

097-DWM层-订单宽表  关联维度  优化1旁路缓存  思路分析.mp4

098-DWM层-订单宽表  关联维度  优化1旁路缓存  Redis工具类&Key的设计.mp4

099-DWM层-订单宽表  关联维度  优化1旁路缓存  代码编写.mp4

100-DWM层-订单宽表  关联维度  优化1旁路缓存  代码测试.mp4

101-DWM层-订单宽表  回顾.mp4

102-DWM层-订单宽表  关联维度  优化2  异步IO说明.mp4

103-DWM层-订单宽表  关联维度  优化2  异步IO编码步骤.mp4

104-DWM层-订单宽表  关联维度  优化2  异步IO编码  初始化函数.mp4

105-DWM层-订单宽表  关联维度  优化2  异步IO编码  异步函数完成.mp4

106-DWM层-订单宽表  关联维度  优化2  异步IO编码  测试准备.mp4

107-DWM层-订单宽表  关联维度  优化2  异步IO编码  测试完成.mp4

108-DWM层-订单宽表  关联维度  补充其他维度信息.mp4

109-DWM层-订单宽表  最终测试.mp4

110-DWM层-订单宽表  不丢维度数据说明.mp4

111-DWM层-支付宽表  需求分析.mp4

112-DWM层-支付宽表  代码编写.mp4

113-DWM层-支付宽表  代码测试.mp4

114-DWM层-支付宽表  时间工具类说明.mp4

115-DWS层-课程介绍.mp4

116-DWS层-访客主题宽表  需求分析.mp4

117-DWS层-访客主题宽表  思路整理&读取Kafka数据.mp4

118-DWS层-访客主题宽表  处理输出流&union&提取时间戳分组.mp4

119-DWS层-访客主题宽表  开窗&聚合.mp4

120-DWS层-访客主题宽表  打印测试.mp4

121-DWS层-ClickHouse  课程介绍.mp4

122-DWS层-ClickHouse  概述&特点.mp4

123-DWS层-ClickHouse  安装准备工作.mp4

124-DWS层-ClickHouse  安装&启动.mp4

125-DWS层-ClickHouse  数据类型.mp4

126-DWS层-ClickHouse  简单引擎介绍.mp4

127-DWS层-ClickHouse  MergeTree.mp4

128-DWS层-ClickHouse  MergeTree之Partition By.mp4

129-DWS层-ClickHouse  MergeTree之Primary Key.mp4

130-DWS层-ClickHouse  MergeTree之Order By.mp4

131-DWS层-ClickHouse  MergeTree之TTL.mp4

132-DWS层-ClickHouse  ReplacingMergeTree.mp4

133-DWS层-ClickHouse  SummingMergeTree.mp4

134-DWS层-ClickHouse  引擎选择分析.mp4

135-DWS层-ClickHouse  SQL操作  一.mp4

136-DWS层-ClickHouse  SQL操作  二.mp4

137-DWS层-ClickHouse  副本机制.mp4

138-DWS层-ClickHouse  分片机制  说明.mp4

139-DWS层-ClickHouse  分片机制  实操.mp4

140-DWS层-访客主题  ClickHouseUtil  创建.mp4

141-DWS层-访客主题  ClickHouseUtil  封装.mp4

142-DWS层-访客主题  ClickHouseUtil  封装完成.mp4

143-DWS层-访客主题  ClickHouseUtil  测试完成.mp4

144-DWS层-商品主题  需求分析.mp4

145-DWS层-商品主题  JavaBean说明.mp4

146-DWS层-商品主题  代码编写  思路整理&消费数据创建流.mp4

147-DWS层-商品主题  代码编写  处理页面日志&收藏数据&购物车数据.mp4

148-DWS层-商品主题  代码编写  处理订单&支付数据.mp4

149-DWS层-商品主题  代码编写  处理退单&评价数据.mp4

150-DWS层-商品主题  代码编写  分组开窗&聚合.mp4

151-DWS层-商品主题  代码编写  关联维度&将数据写入ClickHouse.mp4

152-DWS层-商品主题-整体测试.mp4

153-DWS层-商品主题-需求分析.mp4

154-DWS层-商品主题  代码编写  创建环境&使用DDL方式读取Kafka数据.mp4

155-DWS层-商品主题  代码编写  分组开窗聚合.mp4

156-DWS层-商品主题  代码编写  将动态表转换为流并打印.mp4

157-DWS层-商品主题  代码编写  将数据写入ClickHouse&测试.mp4

158-DWS层-关键词主题  需求分析.mp4

159-DWS层-关键词主题  代码编写  分词工具类封装.mp4

160-DWS层-关键词主题  代码编写  分词UDTF.mp4

161-DWS层-关键词主题  代码编写  思路分析&读取数据&建表.mp4

162-DWS层-关键词主题  代码编写  分词&开窗聚合.mp4

163-DWS层-关键词主题  代码编写  动态表转换为流&写入ClickHouse.mp4

164-DWS层-关键词主题  代码测试.mp4

165-数据可视化-课程介绍.mp4

166-数据可视化-Sugar  创建大屏.mp4

167-数据可视化-Sugar  使用步骤介绍.mp4

168-数据可视化-数据接口  项目构建.mp4

169-数据可视化-数据接口  依赖导入&分层说明.mp4

170-数据可视化-数据接口  GMV接口  Mapper完成.mp4

171-数据可视化-数据接口  GMV接口  Service&Controller完成.mp4

172-数据可视化-数据接口  GMV接口  测试.mp4

173-数据可视化-数据接口  GMV接口  对接Sugar.mp4

174-数据可视化-数据接口  品牌GMV接口  Mapper完成.mp4

175-数据可视化-数据接口  品牌GMV接口  Service完成.mp4

176-数据可视化-数据接口  品牌GMV接口  Controller完成.mp4

177-数据可视化-数据接口  品牌GMV接口  测试完成.mp4

178-数据可视化-数据接口  品牌GMV接口  对接Sugar.mp4

179-数据可视化-数据接口  导入代码&品类GMV&SPU GMV.mp4

180-数据可视化-数据接口  其他需求图表.mp4

181-数据可视化-最终测试.mp4

182-Flink优化-课程介绍.mp4

183-Flink优化-资源优化之内存设置.mp4

184-Flink优化-资源优化之并行度设置.mp4

185-Flink优化-资源优化之RockDB配置.mp4

186-Flink优化-资源优化之CheckPoint配置.mp4

187-Flink优化-资源优化之ParameterTool的介绍.mp4

188-Flink优化-反压处理之反压介绍&定位.mp4

189-Flink优化-反压处理之反压问题解决.mp4

190-Flink优化-数据倾斜之定位问题.mp4

191-Flink优化-数据倾斜之KeyBy之前的数据倾斜.mp4

192-Flink优化-数据倾斜之KeyBy之后直接聚合.mp4

193-Flink优化-数据倾斜之KeyBy之后开窗聚合.mp4

194-Flink优化-KafkaSource.mp4

195-Flink优化-FlinkSQL优化之MiniBatch.mp4

196-Flink优化-FlinkSQL优化之LocalGlobal.mp4

197-Flink优化-FlinkSQL优化之SplitDistinct.mp4

198-Flink优化-FlinkSQL优化之Agg With Filter.mp4

199-Flink优化-FlinkSQL优化之TopN优化.mp4

200-Flink优化-FlinkSQL优化之去重方案&其他.mp4

git.txt

资料.tar