Ι 课程介绍
* 课程时间:2023年完结(会员免费包更新)
* 课程包括:视频+课程资料
* 课程售价:¥34.9元
* 会员免费
* 课程目录:如下
0_day01-01.项目背景和意义介绍(1).mp4
1_day01-02.业务系统联机事务处理数据库的理解.mp4
2_day01-03.业务系统的工作流程举例.mp4
3_day01-04.业务系统中的两大类数据及其产生原理.mp4
4_day01-05.项目中会涉及到的几类日志数据生成原理介绍.mp4
5_day01-06.项目中涉及到的日志数据内容解析.mp4
6_day01-07.日志数据中releasechannel和deviceid的解析.mp4
7_day01-08.项目开发的主要内容及所用技术组件介绍.mp4
8_day01-09.项目整体架构和整体数据流程.mp4
9_day02-01.业务系统和数据产生原理复习-广告业务流程中的数据产生详解.mp4
10_day02-02.数仓基础概念-主题详解.mp4
11_day02-03.数仓基础概念-分层设计思想.mp4
12_day02-04.数仓基础概念-etl是什么.mp4
13_day02-05.数仓基础概念-维度和度量.mp4
14_day02-06.数据采集-日志数据采集的宏观认识.mp4
15_day02-07.flume核心概念之agent宏观认识.mp4
16_day02-08.flume核心概念之agent内部组件详解.mp4
17_day02-09.flume核心概念之agent内部组件再次强化.mp4
18_day02-10.flume核心概念之数据传递可靠性保证机制.mp4
19_day02-11.商城主系统app行为日志模拟器使用.mp4
20_day02-12.flume使用入门案例演示.mp4
21_day03-01.项目的日志采集系统设计-问题1:跨网段传输问题.mp4
22_day03-02.项目的日志采集系统设计-传输网络高可用问题.mp4
23_day03-03.项目的日志采集系统设计-加密脱敏和传输能力考虑.mp4
24_day03-04.项目的日志采集系统设计-数据延迟上报的问题.mp4
25_day03-05.项目日志采集开发-时间抽取拦截器开发(1).mp4
26_day03-06.项目日志采集开发-时间抽取拦截器开发(2).mp4
27_day03-07.项目日志采集开发-拦截器打包详解.mp4
28_day03-08.项目日志采集开发-上游采集配置开发.mp4
29_day03-09.项目日志采集开发-下游采集配置开发.mp4
30_day04-01.项目日志数据采集-要点回顾.mp4
31_day04-02.项目日志数据采集-部署测试(1).mp4
32_day04-03.项目日志数据采集-部署测试(2).mp4
33_day04-04.项目日志数据采集-面试要点(数据流量和积压问题).mp4
34_day04-05.公司实际的日志采集网络复杂度补充.mp4
35_day04-06.项目日志数据采集-面试要点(数据丢失重复问题).mp4
36_day04-07.项目日志数据采集-质量管理开发.mp4
37_day04-08.项目日志数据采集-web程序开发基础概念问题.mp4
38_day05-01.对质量管理系统及其与web系统的概念厘清.mp4
39_day05-02.质量管理需求开发-日志采集质量检查-接口规范定义.mp4
40_day05-03.质量管理需求开发-日志采集质量-源端日志统计脚本开发.mp4
41_day05-04.质量管理需求开发-日志采集质量-web层前端开发.mp4
42_day05-05.质量管理需求开发-日志采集质量-查询报告的后端开发.mp4
43_day05-06.质量管理需求开发-日志采集质量管理-web侧接收质量上报后端功能开发.mp4
44_day05-07.质量管理需求开发-日志采集质量-hdfs日志行数统计脚本.mp4
45_day05-08.质量管理需求开发-日志采集-hdfs行数统计上报-脚本及web侧后端开发.mp4
46_day05-09.质量管理需求开发-日志采集质量管理-hdfs落地行数报告展示-web侧前.mp4
47_day05-10.质量管理需求开发-日志采集质量管理-hdfs落地行数报告展示-web侧后.mp4
48_day05-11.质量管理需求开发-日志采集质量管理-日志服务器行数报告条件查询-web侧.mp4
49_day05-12.商城app通用行为日志入库开发–设计.mp4
50_day05-13.质量管理平台添加日志采集是否重复的查询功能.mp4
51_day05-14.商城app通用行为日志加载入库脚本开发.mp4
52_day06-01.内容回顾-日志数据采集质量监控.mp4
53_day06-02.内容回顾-日志数据加载入库的方案设计和脚本开发.mp4
54_day06-03.日志数据加载入库脚本-运行测试.mp4
55_day06-04.对于hdfs上压缩文本文件行数统计命令的性能问题补充.mp4
56_day06-05.商城app行为日志从ods到dwd的处理需求-清洗过滤.mp4
57_day06-06.商城app行为日志从ods到dwd的处理需求-数据解析和文件格式转换.mp4
58_day06-07.商城app行为日志从ods到dwd的处理需求-会话切割.mp4
59_day06-08.商城app行为日志从ods到dwd的处理需求-数据规范化.mp4
60_day06-09.商城app行为日志从ods到dwd的处理需求-维度退化.mp4
61_day06-10.商城app行为日志从ods到dwd的处理需求-生成全局用户标识.mp4
63_day06-12.etl需求-gps地理位置解析-算法及方案设计.mp4
64_day06-13.etl需求-全局guid生成-算法及方案设计.mp4
65_day06-14.etl需求开发-ods处理到dwd的大需求中的第一部分处理.mp4
66_day07-01.内容要点回顾.mp4
67_day07-02.ods清洗过滤会话切割的sql代码脚本调用开发.mp4
68_day07-03.设备账号绑定表及匿名设备id表的更新逻辑设计.mp4
69_day07-04.行为日志抽取设备账号组合及纯匿名设备的细节逻辑.mp4
70_day07-05.设备账号绑定权重表更新sql代码开发.mp4
71_day07-06.匿名设备id表更新sql开发.mp4
72_day07-07.商城日志ods-dwd加工整体宏观认识释疑.mp4
73_day07-08.商城行为日志生成guid的sql代码开发.mp4
74_day08-01.关于匿名设备表的分区增量全量问题修正.mp4
75_day08-02.地域维度信息集成之维表构建思路.mp4
76_day08-03.地域维度信息集成之维表构建-spark代码开发.mp4
77_day08-04.地域维表构建测试.mp4
78_day08-05.商城app行为日志数据关联地域维度信息.mp4
79_day08-06.gps参考维表的补全追加流程开发.mp4
80_day08-07.内容要点回顾.mp4
81_day09-01.流量分析的报表需求举例.mp4
82_day09-02.流量分析的报表需求计算逻辑分析和抽象提炼.mp4
83_day09-03.数仓建模理论基础概念.mp4
84_day09-04.数仓建模理论之-主题划分方法论.mp4
85_day09-05.数仓建模理论之-ER模型及三范式.mp4
86_day09-06.数仓建模理论之-维度建模.mp4
87_day09-07.流量分析主题的宽表模型设计(1)-确认度量和确认维度.mp4
88_day09-08.关于维度建模中的补充核心概念-度量-维度-指标-口径-粒度.mp4
89_day10-01.建模理论要点回顾(1).mp4
90_day10-02.建模理论要点回顾(2).mp4
91_day10-03.流量分析主题的表模型解析(1)-事实表及粒度的确定.mp4
92_day10-04.流量分析主题的表模型解析(2)-维表设计解析.mp4
93_day10-05.流量分析主题的访客属性维表构建(1).mp4
94_day10-06.访客通用属性维表(拉链表)测试代码开发.mp4
95_day10-07.访客通用属性维表(拉链表)-真实代码开发.mp4
96_day10-08.流量分析主题开发-会话属性维表(会话粒度聚合中间表)需求解析.mp4
97_day10-09.流量分析主题开发-会话粒度聚合表代码实现.mp4
98_day10-10.流量分析主题开发-事实表开发难点-页面贡献量-方案设计.mp4
99_day10-11.流量分析主题开发-事实表难点-贡献量(树的构建算法).mp4
100_day11-01.内容要点回顾.mp4
101_day11-02.贡献量开发-页面访问记录构建成树.mp4
102_day11-03.贡献量开发-页面访问记录树的各节点贡献量计算.mp4
103_day11-04.流量分析主题-星型模型-事实表开发(1).mp4
104_day11-05.流量分析主题-星型模型-事实表开发(2).mp4
105_day11-06.流量分析主题-星型模型-事实表开发(3).mp4
106_day11-07.流量分析主题-模型之上的报表需求开发示例.mp4
107_day11-08.用户活跃度分析-dws层的事实表模型设计(拉链表思想).mp4
108_day11-09.用户活跃度分析-dws层模型表(活跃区间表)设计及开发.mp4
109_day12-01.内容回顾-活跃分析报表需求举例.mp4
110_day12-02.活跃分析报表开发-需求示例.mp4
111_day12-03.多维分析报表行数估算理论-活跃分析报表需求(2).mp4
112_day12-04.留存分析主题-留存概念解析.mp4
113_day12-05.留存分析主题-留存报表1-计算逻辑(1).mp4
114_day12-06.留存分析主题-留存报表1-sql开发.mp4
115_day12-07.活跃留存分析-中间模型升级思想.mp4
116_day12-08.活跃留存分析-中间模型升级-roaringbitmap功能验证.mp4
117_day12-09.活跃留存分析-中间模型表初始化生成-代码实现.mp4
118_day13-01.数仓阶段梳理-ods层梳理.mp4
119_day13-02.数仓阶段梳理-dwd层梳理.mp4
120_day13-03.数仓阶段梳理-dws层-流量分析主题梳理.mp4
121_day13-04.数仓阶段梳理-dws层-活跃分析主题.mp4
122_day13-05.数仓阶段梳理-dws层-留存分析主题.mp4
123_day13-06留存分析报表开发示例2(1).mp4
124_day14-01.留存分析-报表开发示例2-(2).mp4
125_day14-02.留存分析-报表开发示例2-(3).mp4
126_day14-03.留存分析-报表开发示例3-周留存分析报表开发.mp4
127_day14-04.漏斗分析-基础概念解析.mp4
128_day14-05.漏斗分析-需求抽象解析(附带了底层数据变化对数仓各层影响的应对策略).mp4
129_day14-06.漏斗分析-中间表模型设计.mp4
130_day14-07.漏斗分析-计算逻辑设计(1).mp4
131_day14-08.漏斗分析-中间聚合表开发-代码实现.mp4
132_day14-09.漏斗分析-报表开发-需求分析-口径定义的问题以及所属的数据治理问题.mp4
133_day14-10.漏斗分析-报表开发-代码实现.mp4
134_day14-11.归因分析-基础概念及常见归因模型策略.mp4
135_day14-12.归因分析-中间表模型设计.mp4
136_day15-01.归因分析-中间表-计算逻辑设计和难点突破.mp4
137_day15-02.归因分析-中间表-完整代码开发.mp4
138_day15-03-号外:灵异事件破案.mp4
139_day15-04.日志数据域的其他分析主题介绍.mp4
140_day15-05.业务域数据分析-整体流程、方案介绍.mp4
141_day15-06.变更数据实时捕获(cdc)技术原理解析.mp4
142_day15-07.flink-cdc与flinksql底层的changelog流机制天然匹.mp4
143_day15-08.flink-cdc功能测试验证.mp4
144_day15-09.flink-cdc结合flinksql实现数据实时报表计算.mp4
145_day15-10.flink-cdc同步业务库订单表实战案例测试.mp4
146_day15-11.从kafka传输变更业务数据到hdfs配置开发.mp4
147_day15-12.关于增量变更数据如何做成拉链表的关键注意点.mp4
148_day16-01.业务库数据同步方案要点复习-sqoop快速认识.mp4
149_day16-02.用业务表变更数据维护更新拉链表开发.mp4
150_day16-03.订单主题分析需求-业务表及关联的相关业务流程分析.mp4
151_day16-04.订单分析主题-订单金额维度分析报表开发示例1.mp4
152_day16-05.订单分析主题-订单量退货量分析.mp4
153_day16-06.用户画像概述.mp4
154_day17-01.用户画像标签开发需求1-消费订单类统计标签开发(1).mp4
155_day17-02.用户画像标签开发需求1-消费订单标签(2).mp4
156_day17-03.用户画像标签开发需求1-消费订单标签(3)测试调试.mp4
157_day17-04.用户画像标签开发需求2-活跃统计标签开发.mp4
158_day18-01.画像数据的各种最终使用场景及对应的技术手段.mp4
159_day18-02.hbase的批量数据快速导入工具bulkload工作原理.mp4
160_day18-03.利用bulkload导入画像数据到hbase的代码测试.mp4
161_day18-04.画像数据导入hbase的几个重要问题-及全自动化的改造方案.mp4
162_day06-11.etl需求-会话分割-计算逻辑设计.mp4
162_day18-05.元数据管理的概念及意义及元数据本身的理解.mp4
163_day18-06.元数据管理系统atlas的基本概念及核心功能模块.mp4
164_day18-07.atlas的编译安装速览.mp4
165_day18-08.atlas导入hive元信息的演示以及技术元数据查看-血缘跟.mp4
166_day18-09.atlas的各类元数据管理功能演示及说明.mp4
167_day19-01.任务调度的基础理解-dolphinscheduler介绍及安装启动.mp4
168_day19-02.dolphinscheduler的初始配置-告警组-环境参数-用户租户等.mp4
169_day19-03.shell脚本任务的调度演示.mp4
170_day19-04.sql任务调度演示.mp4
171_day19-05.如何使用dolphin调度器补数.mp4
172_day19-06.在dolphin上用shell方式调度spark任务.mp4
173_day19-07.在dolphin上用spark任务节点类型来调度spark任务.mp4
174_day19-08.hue功能演示.mp4
175_day19-09.离线数仓整体架构梳理.mp4