投稿

【尚硅谷】Flink数据仓库视频教程（一套精通实时数仓项目）

17.3万

5228

2021-10-27 14:22:22

未经作者授权，禁止转载

正在缓冲...

【配套资料】关注公众号：尚硅谷教育，回复“视频资料”免费获取【课程简介】本套视频教程综合展示实时数据处理领域的一个重要应用：实时数仓项目。

尚硅谷发消息

1V1就业指导、简历模板、毕设，加小谷姐姐秋：3124787958

001-课程介绍

10:04

002-项目介绍

13:31

003-采集模块-课程介绍

04:57

004-采集模块-数仓分层之为什么分层

07:46

005-采集模块-数仓分层之分层明细

11:15

006-采集模块-整体需求介绍

17:31

007-采集模块-离线架构分析之Sqoop&Flume

09:36

008-采集模块-离线架构分析之FlumeTairDirSource问题提出&解决

19:04

009-采集模块-离线架构分析之Kafka

28:27

010-采集模块-离线架构分析之其他

07:57

011-采集模块-实时架构分析

11:59

012-采集模块-架构对比

10:47

013-采集模块-日志数据采集之需求分析

05:50

014-采集模块-日志数据采集之MockJar包测试

05:28

015-采集模块-日志数据采集之SpringBoot简单介绍

08:14

016-采集模块-日志数据采集之SpringBoot创建项目&简单测试

17:53

017-采集模块-日志数据采集之SpringBoot创建项目&加参数测试

03:46

018-采集模块-日志数据采集之数据落盘&写入Kafka 编码

15:47

019-采集模块-日志数据采集之数据落盘&写入Kafka 本地测试

05:06

020-采集模块-日志数据采集之数据落盘&写入Kafka 单机测试

04:58

021-采集模块-日志数据采集之Nginx 介绍

09:37

022-采集模块-日志数据采集之Nginx 安装&启动

09:07

023-采集模块-日志数据采集之Nginx 配置负载均衡&测试

10:16

024-采集模块-日志数据采集之集群测试

12:58

025-采集模块-业务数据采集之建库&建表

05:21

026-采集模块-业务数据采集之FlinkCDC 什么是CDC&对比

10:28

027-采集模块-业务数据采集之FlinkCDC 介绍

11:15

028-采集模块-业务数据采集之FlinkCDC DataStream方式编码

21:34

029-采集模块-业务数据采集之FlinkCDC DataStream方式测试

10:36

030-采集模块-业务数据采集之FlinkCDC DataStreamAPI 设置CK&打包&开启集群

16:55

031-采集模块-业务数据采集之FlinkCDC DataStreamAPI 打包进行断点续传测试

12:13

032-采集模块-业务数据采集之FlinkCDC FlinkSQLAPI 编码&测试

11:45

033-采集模块-业务数据采集之FlinkCDC DataStreamAPI 自定义反序列化器格式说明

13:22

034-采集模块-业务数据采集之FlinkCDC DataStreamAPI 自定义反序列化器编码完成

16:48

035-采集模块-业务数据采集之FlinkCDC DataStreamAPI 自定义反序列化器代码测试

06:15

036-采集模块-业务数据采集之FlinkCDC DataStreamAPI&FlinkSQL对比

03:32

037-采集模块-业务数据采集之Maxwell 安装说明&测试

12:22

038-采集模块-业务数据采集之Canal 安装说明&测试

08:37

039-采集模块-业务数据采集之CDC对比

15:16

040-采集模块-业务数据采集之读取MySQL数据并写入Kafka 编码

11:48

041-采集模块-业务数据采集之读取MySQL数据并写入Kafka 测试

04:40

042-DWD&DIM-课程介绍

06:16

043-DWD&DIM-行为数据需求分析

09:52

044-DWD&DIM-行为数据思路整理&消费Kafka数据

08:53

045-DWD&DIM-行为数据将数据转换为JSON对象

08:16

046-DWD&DIM-行为数据新老用户校验

11:23

047-DWD&DIM-行为数据侧输出流&写入Kafka

11:08

048-DWD&DIM-行为数据测试

10:46

049-DWD&DIM-业务数据之需求分析

28:40

050-DWD&DIM-业务数据之代码逻辑梳理

06:38

051-DWD&DIM-业务数据之代码编写消费数据并过滤

05:02

052-DWD&DIM-业务数据之代码编写读取配置表创建广播流

04:12

053-DWD&DIM-业务数据之代码编写配置表字段分析&建表&JavaBean

23:17

054-DWD&DIM-业务数据之代码编写开启配置表Binlog并测试

04:48

055-DWD&DIM-业务数据之代码编写连接主流&广播流并分析业务逻辑

08:35

056-DWD&DIM-业务数据之代码编写创建TableProcessFunction并初始化相关参数

09:13

057-DWD&DIM-业务数据之代码编写处理广播流数据解析数据&建表

17:52

058-DWD&DIM-业务数据之代码编写处理广播流数据写入状态

01:11

059-DWD&DIM-业务数据之代码编写处理主流数据读取状态&过滤字段

17:11

060-DWD&DIM-业务数据之代码编写处理主流数据补充SinkTable&分流

05:17

061-DWD&DIM-业务数据之代码编写检查代码

07:18

062-DWD&DIM-业务数据之代码编写测试准备

08:22

063-DWD&DIM-业务数据之代码编写测试

15:21

064-DWD&DIM-业务数据之代码编写将数据写入HBase 编码

27:32

065-DWD&DIM-业务数据之代码编写将数据写入Kafka 编码

21:05

066-DWD&DIM-业务数据之整体测试环境准备

06:49

067-DWD&DIM-业务数据之整体测试测试完成

15:14

068-ODS&DWD&DIM-小总结

11:39

069-ODS&DWD&DIM-SQL分享需求说明&建表&导数据

07:20

070-ODS&DWD&DIM-SQL分享方案一

30:16

071-ODS&DWD&DIM-SQL分享方案二

18:44

072-ODS&DWD&DIM-SQL分享 HiveOnSpark Bug说明

02:13

073-DWM层-需求分析

16:30

074-DWM层-访客UV 需求分析

09:30

075-DWM层-访客UV 代码编写消费数据并转换为JSON对象

04:22

076-DWM层-访客UV 代码编写过滤数据

15:17

077-DWM层-访客UV 代码编写设置状态超时时间防止状态过大

13:14

078-DWM层-访客UV 代码测试

08:20

079-DWM层-跳出明细需求分析

12:26

080-DWM层-跳出明细代码编写

15:34

081-DWM层-跳出明细代码测试

12:21

082-DWM层-跳出明细测试

07:56

083-DWM层-跳出明细 CEP 循环模式

03:09

084-DWM层-订单宽表需求分析

05:26

085-DWM层-订单宽表双流JOIN 官方文档说明

17:22

086-DWM层-订单宽表双流JOIN 代码编写

09:16

087-DWM层-订单宽表双流JOIN 代码测试

12:24

088-DWM层-订单宽表代码编写消费Kafka数据&转换JavaBean&提取事件时间

11:29

089-DWM层-订单宽表代码编写订单与订单明细表双流JOIN

09:14

090-DWM层-订单宽表代码测试准备工作

11:01

091-DWM层-订单宽表代码测试测试完成

05:58

092-DWM层-订单宽表关联维度思路梳理

05:14

093-DWM层-订单宽表关联维度 JDBCUtil 返回值&参数说明

09:41

094-DWM层-订单宽表关联维度 JDBCUtil 查询&封装泛型对象

19:25

095-DWM层-订单宽表关联维度 JDBCUtil 测试

04:15

096-DWM层-订单宽表关联维度 DimUtil封装&优化的必要性

15:50

097-DWM层-订单宽表关联维度优化1旁路缓存思路分析

10:53

098-DWM层-订单宽表关联维度优化1旁路缓存 Redis工具类&Key的设计

15:35

099-DWM层-订单宽表关联维度优化1旁路缓存代码编写

13:41

100-DWM层-订单宽表关联维度优化1旁路缓存代码测试

08:30

101-DWM层-订单宽表回顾

21:21

102-DWM层-订单宽表关联维度优化2 异步IO说明

14:39

103-DWM层-订单宽表关联维度优化2 异步IO编码步骤

04:52

104-DWM层-订单宽表关联维度优化2 异步IO编码初始化函数

22:33

105-DWM层-订单宽表关联维度优化2 异步IO编码异步函数完成

23:58

106-DWM层-订单宽表关联维度优化2 异步IO编码测试准备

17:44

107-DWM层-订单宽表关联维度优化2 异步IO编码测试完成

09:53

108-DWM层-订单宽表关联维度补充其他维度信息

08:37

109-DWM层-订单宽表最终测试

04:46

110-DWM层-订单宽表不丢维度数据说明

06:36

111-DWM层-支付宽表需求分析

09:31

112-DWM层-支付宽表代码编写

15:50

113-DWM层-支付宽表代码测试

08:40

114-DWM层-支付宽表时间工具类说明

07:36

115-DWS层-课程介绍

05:31

116-DWS层-访客主题宽表需求分析

13:44

117-DWS层-访客主题宽表思路整理&读取Kafka数据

13:03

118-DWS层-访客主题宽表处理输出流&union&提取时间戳分组

17:11

119-DWS层-访客主题宽表开窗&聚合

18:03

120-DWS层-访客主题宽表打印测试

17:15

121-DWS层-ClickHouse 课程介绍

03:44

122-DWS层-ClickHouse 概述&特点

13:11

123-DWS层-ClickHouse 安装准备工作

05:44

124-DWS层-ClickHouse 安装&启动

10:24

125-DWS层-ClickHouse 数据类型

16:48

126-DWS层-ClickHouse 简单引擎介绍

04:33

127-DWS层-ClickHouse MergeTree

10:33

128-DWS层-ClickHouse MergeTree之Partition By

06:03

129-DWS层-ClickHouse MergeTree之Primary Key

05:45

130-DWS层-ClickHouse MergeTree之Order By

04:20

131-DWS层-ClickHouse MergeTree之TTL

05:27

132-DWS层-ClickHouse ReplacingMergeTree

07:53

133-DWS层-ClickHouse SummingMergeTree

06:22

134-DWS层-ClickHouse 引擎选择分析

15:05

135-DWS层-ClickHouse SQL操作一

13:40

136-DWS层-ClickHouse SQL操作二

23:03

137-DWS层-ClickHouse 副本机制

11:15

138-DWS层-ClickHouse 分片机制说明

08:00

139-DWS层-ClickHouse 分片机制实操

13:20

140-DWS层-访客主题 ClickHouseUtil 创建

13:17

141-DWS层-访客主题 ClickHouseUtil 封装

12:10

142-DWS层-访客主题 ClickHouseUtil 封装完成

18:30

143-DWS层-访客主题 ClickHouseUtil 测试完成

09:26

144-DWS层-商品主题需求分析

32:04

145-DWS层-商品主题 JavaBean说明

08:31

146-DWS层-商品主题代码编写思路整理&消费数据创建流

07:52

147-DWS层-商品主题代码编写处理页面日志&收藏数据&购物车数据

17:04

148-DWS层-商品主题代码编写处理订单&支付数据

07:55

149-DWS层-商品主题代码编写处理退单&评价数据

08:52

150-DWS层-商品主题代码编写分组开窗&聚合

09:20

151-DWS层-商品主题代码编写关联维度&将数据写入ClickHouse

09:32

152-DWS层-商品主题-整体测试

21:37

153-DWS层-地区主题-需求分析

05:11

154-DWS层-地区主题代码编写创建环境&使用DDL方式读取Kafka数据

22:45

155-DWS层-地区主题代码编写分组开窗聚合

10:30

156-DWS层-地区主题代码编写将动态表转换为流并打印

07:07

157-DWS层-地区主题代码编写将数据写入ClickHouse&测试

11:23

158-DWS层-关键词主题需求分析

04:22

159-DWS层-关键词主题代码编写分词工具类封装

09:52

160-DWS层-关键词主题代码编写分词UDTF

12:01

161-DWS层-关键词主题代码编写思路分析&读取数据&建表

16:58

162-DWS层-关键词主题代码编写分词&开窗聚合

10:56

163-DWS层-关键词主题代码编写动态表转换为流&写入ClickHouse

09:11

164-DWS层-关键词主题代码测试

04:07

165-数据可视化-课程介绍

07:36

166-数据可视化-Sugar 创建大屏

04:11

167-数据可视化-Sugar 使用步骤介绍

04:12

168-数据可视化-数据接口项目构建

05:11

169-数据可视化-数据接口依赖导入&分层说明

10:02

170-数据可视化-数据接口 GMV接口 Mapper完成

05:01

171-数据可视化-数据接口 GMV接口 Service&Controller完成

09:18

172-数据可视化-数据接口 GMV接口测试

03:51

173-数据可视化-数据接口 GMV接口对接Sugar

13:59

174-数据可视化-数据接口品牌GMV接口 Mapper完成

12:41

175-数据可视化-数据接口品牌GMV接口 Service完成

05:41

176-数据可视化-数据接口品牌GMV接口 Controller完成

03:49

177-数据可视化-数据接口品牌GMV接口测试完成

07:38

178-数据可视化-数据接口品牌GMV接口对接Sugar

03:41

179-数据可视化-数据接口导入代码&品类GMV&SPU GMV

08:39

180-数据可视化-数据接口其他需求图表

11:54

181-数据可视化-最终测试

13:30

182-Flink优化-课程介绍

11:21

183-Flink优化-资源优化之内存设置

14:47

184-Flink优化-资源优化之并行度设置

11:36

185-Flink优化-资源优化之RockDB配置

13:05

186-Flink优化-资源优化之CheckPoint配置

04:26

187-Flink优化-资源优化之ParameterTool的介绍

08:20

188-Flink优化-反压处理之反压介绍&定位

26:28

189-Flink优化-反压处理之反压问题解决

16:28

190-Flink优化-数据倾斜之定位问题

02:17

191-Flink优化-数据倾斜之KeyBy之前的数据倾斜

06:41

192-Flink优化-数据倾斜之KeyBy之后直接聚合

18:57

193-Flink优化-数据倾斜之KeyBy之后开窗聚合

15:40

194-Flink优化-KafkaSource

27:41

195-Flink优化-FlinkSQL优化之MiniBatch

08:42

196-Flink优化-FlinkSQL优化之LocalGlobal

03:40

197-Flink优化-FlinkSQL优化之SplitDistinct

03:35

198-Flink优化-FlinkSQL优化之Agg With Filter

01:39

199-Flink优化-FlinkSQL优化之TopN优化

10:09

200-Flink优化-FlinkSQL优化之去重方案&其他

05:38

顶部