尚硅谷线上问诊实时数仓项目延续了离线数仓的业务逻辑,以线上问诊开处方为基础业务逻辑,真实表现了线上问诊数据的实时分析统计。
线上问诊实时数仓项目共分三大部分:实时数仓架构介绍、数仓模型搭建、Suger可视化大屏展示。项目以线上问诊采集项目为前置基础,使用采集项目中搭建的虚拟机环境,读取采集项目实时监控的业务数据,对数据进行实时的分析计算,最终得到指标需求结果。
项目中使用的框架包括:Hadoop、Kafka、Flume、Maxwell、Flink、Phoenix、HBase、Redis、Doris、Suger等。教程通过精炼的业务体系逻辑,带你快速掌握实时数仓所使用的技术手段!
课程目录
├──尚硅谷大数据项目之线上问诊离线数仓
| ├──视频
| | ├──01-数据采集课程内容介绍.mp4 6.86M
| | ├──02-数据仓库的概念.mp4 12.08M
| | ├──03-数据仓库的架构.mp4 12.60M
| | ├──04-项目需求分析.mp4 15.10M
| | ├──05-技术选型.mp4 22.98M
| | ├──06-系统数据流程设计.mp4 20.56M
| | ├──07-框架版本的选择.mp4 17.99M
| | ├──08-服务器的选型.mp4 16.10M
| | ├──09-集群规模.mp4 14.00M
| | ├──10-集群规模设计.mp4 22.48M
| | ├──100-医生维度表建表.mp4 44.31M
| | ├──101-医生维度表数据加载.mp4 34.94M
| | ├──102-医院维度表建表和数据加载.mp4 22.38M
| | ├──103-药品维度表建表和数据加载.mp4 14.47M
| | ├──104-患者维度表建表和数据加载.mp4 15.77M
| | ├──105-用户维度表建表和数据加载.mp4 9.86M
| | ├──106-dim层数据加载脚本.mp4 44.24M
| | ├──107-事实表建模理论回顾.mp4 49.45M
| | ├──108-DWD层设计要点.mp4 9.22M
| | ├──109-问诊事务型事实表建表.mp4 21.40M
| | ├──11-业务数据说明.mp4 27.07M
| | ├──110-问诊事实表首日数据加载.mp4 38.00M
| | ├──111-问诊事实表每日数据加载.mp4 17.78M
| | ├──112-问诊支付成功事实表建表和首日加载.mp4 35.73M
| | ├──113-问诊支付成功事实表每日数据加载.mp4 39.69M
| | ├──114-处方开单事实表建表和首日数据加载.mp4 33.90M
| | ├──115-处方开单事实表每日数据加载.mp4 14.03M
| | ├──116-处方支付成功事实表建表和首日数据加载.mp4 41.69M
| | ├──117-处方支付成功事实表每日数据加载.mp4 23.72M
| | ├──118-医生注册事实表建表和首日数据加载.mp4 35.69M
| | ├──119-医生注册事实表每日数据加载.mp4 14.63M
| | ├──12-虚拟机安装配置.mp4 88.87M
| | ├──120-用户注册事实表建表和数据加载.mp4 32.78M
| | ├──121-患者登记事实表建表和数据加载.mp4 29.66M
| | ├──122-用户评价事实表建表和数据加载.mp4 25.37M
| | ├──123-dwd首日数据加载脚本.mp4 55.81M
| | ├──124-dwd每日数据加载脚本.mp4 70.35M
| | ├──125-dws设计要点.mp4 22.11M
| | ├──126-医院患者性别年龄段问诊最近1日汇总表mp4.mp4 75.30M
| | ├──127-医院患者性别年龄段问诊支付成功最近1日汇总表.mp4 34.96M
| | ├──128-医院患者性别年龄段处方开单最近1日汇总表.mp4 33.55M
| | ├──129-医院患者性别年龄段处方开单支付成功最近1日汇总表.mp4 26.31M
| | ├──13-集群分发脚本.mp4 57.47M
| | ├──130-医生粒度问诊最近1日汇总表.mp4 27.02M
| | ├──131-dws 1d首日数据加载脚本.mp4 44.64M
| | ├──132-dws 1d每日数据加载脚本.mp4 35.97M
| | ├──133-交易域医院患者性别年龄段粒度问诊最近n日汇总表.mp4 48.09M
| | ├──134-交易域医院患者性别年龄段粒度问诊支付成功最近n日汇总表.mp4 19.38M
| | ├──135-交易域医院患者性别年龄段粒度处方开单最近n日汇总表.mp4 14.57M
| | ├──136-交易域医院患者性别年龄段粒度处方开单支付成功最近n日汇总表.mp4 15.31M
| | ├──137-交易域医生粒度问诊最近n日汇总表.mp4 9.04M
| | ├──138-dws nd数据加载脚本.mp4 48.20M
| | ├──139-交易域医生粒度问诊历史至今汇总表.mp4 67.53M
| | ├──14-安装jdk.mp4 33.08M
| | ├──140-互动域医院用户粒度用户评价历史至今汇总表.mp4 76.54M
| | ├──141-互动域医院粒度用户评价历史至今汇总表.mp4 65.15M
| | ├──142-dws td首日数据加载脚本.mp4 32.30M
| | ├──143-dws td每日数据加载脚本.mp4 20.66M
| | ├──144-ads层设计要点.mp4 14.00M
| | ├──145-交易综合统计.mp4 118.50M
| | ├──146-各医院交易统计.mp4 62.41M
| | ├──147-各性别患者交易统计.mp4 26.70M
| | ├──148-各年龄段患者交易统计.mp4 24.09M
| | ├──149-医生变动统计.mp4 69.62M
| | ├──15-环境变量配置说明.mp4 12.34M
| | ├──150-用户变动统计.mp4 31.72M
| | ├──151-评价综合统计.mp4 26.92M
| | ├──152-各医院评价统计.mp4 19.58M
| | ├──153-ads数据加载脚本.mp4 63.10M
| | ├──154-mysql建库建表.mp4 20.52M
| | ├──155-将数据从hdfs导入到mysql演示.mp4 78.59M
| | ├──156-生成datax配置文件.mp4 39.71M
| | ├──157-ads导数据到Mysql脚本.mp4 59.80M
| | ├──158-dolphinscheduler简介.mp4 52.71M
| | ├──159-dolphinscheduler部署说明.mp4 32.77M
| | ├──16-查看进程脚本.mp4 10.31M
| | ├──160-安装dolphinscheduler.mp4 152.25M
| | ├──161-安全中心配置.mp4 26.79M
| | ├──162-定义工作流与执行工作流.mp4 46.52M
| | ├──163-定时调度.mp4 8.77M
| | ├──164-局部参数.mp4 24.36M
| | ├──165-全局参数.mp4 34.62M
| | ├──166-参数传递.mp4 17.17M
| | ├──167-参数的优先级.mp4 26.04M
| | ├──168-内置参数.mp4 29.01M
| | ├──169-引用依赖资源.mp4 13.93M
| | ├──17-安装hadoop-配置集群.mp4 61.42M
| | ├──170-告警通知.mp4 31.38M
| | ├──171-失败重试.mp4 9.33M
| | ├──172-生成新数据.mp4 21.59M
| | ├──173-数仓工作流调度.mp4 107.89M
| | ├──174-superset简介.mp4 8.22M
| | ├──175-安装superset.mp4 155.02M
| | ├──176-superset启动脚本.mp4 40.13M
| | ├──177-superset可视化.mp4 73.26M
| | ├──178-总结.mp4 44.73M
| | ├──18-安装hadoop-配置历史服务器.mp4 31.08M
| | ├──19-hadoop群起脚本.mp4 13.66M
| | ├──20-hdfs存储多目录.mp4 21.88M
| | ├──21-集群数据均衡.mp4 30.58M
| | ├──22-hadoop参数调优.mp4 25.67M
| | ├──23-安装zookeeper.mp4 29.11M
| | ├──24-zookeeper启动脚本.mp4 14.92M
| | ├──25-zookeeper常用指令.mp4 21.37M
| | ├──26-安装kafka.mp4 50.58M
| | ├──27-kafka群起脚本.mp4 24.62M
| | ├──28-kafka常用指令-topic相关.mp4 62.23M
| | ├──29-kafka常用指令-生产者和消费者相关.mp4 30.27M
| | ├──30-flume安装与项目经验.mp4 20.57M
| | ├──31-安装mysql.mp4 25.87M
| | ├──32-模拟生成数据.mp4 31.96M
| | ├──33-客户端连接异常问题.mp4 14.48M
| | ├──34-maxwell简介.mp4 18.64M
| | ├──35-mysql原理.mp4 19.65M
| | ├──36-安装maxwell.mp4 63.09M
| | ├──37-maxwell启动脚本.mp4 32.37M
| | ├──38-maxwell数据同步.mp4 59.42M
| | ├──39-同步策略.mp4 26.87M
| | ├──40-数据同步工具.mp4 24.85M
| | ├──41-datax简介和框架设计.mp4 24.63M
| | ├──42-datax运行流程.mp4 12.71M
| | ├──43-datax调度思路.mp4 11.22M
| | ├──44-datax与sqoop的对比.mp4 11.20M
| | ├──45-datax安装.mp4 27.14M
| | ├──46-将数据从mysql导入到hdfs-tableMode模式.mp4 95.43M
| | ├──47-将数据从mysql导入到hdfs-querysql模式.mp4 28.50M
| | ├──48-datax传参.mp4 20.10M
| | ├──49-将数据从hdfs导入到mysql.mp4 75.48M
| | ├──50-datax优化.mp4 33.20M
| | ├──51-datax配置文件生成.mp4 69.06M
| | ├──52-全量表数据同步脚本.mp4 83.24M
| | ├──53-flume配置01.mp4 150.07M
| | ├──54-flume配置02.mp4 145.39M
| | ├──55-增量表首日同步.mp4 37.68M
| | ├──56-flume启动停止脚本.mp4 34.77M
| | ├──57-安装hive.mp4 94.31M
| | ├──58-在线就诊数仓项目简介.mp4 13.89M
| | ├──59-数仓的概念.mp4 27.24M
| | ├──60-数仓架构.mp4 40.46M
| | ├──61-建模的意义.mp4 27.74M
| | ├──62-ER模型.mp4 75.09M
| | ├──63-维度模型.mp4 25.62M
| | ├──64-事实表介绍.mp4 13.95M
| | ├──65-事务型事实表概述.mp4 18.53M
| | ├──66-事务型事实表的设计流程.mp4 51.60M
| | ├──67-事务型事实表的不足.mp4 25.26M
| | ├──68-事务型事实表的不足.mp4 21.05M
| | ├──69-周期型快照事实表的概念.mp4 32.35M
| | ├──70-周期型快照事实表设计与事实类型.mp4 30.01M
| | ├──71-累积型快照事实表.mp4 55.92M
| | ├──72-维度表设计.mp4 71.61M
| | ├──73-规范化与反规范化.mp4 14.54M
| | ├──74-全量快照维度表.mp4 21.09M
| | ├──75-拉链表.mp4 24.41M
| | ├──76-多值维度.mp4 25.88M
| | ├──77-多值属性.mp4 9.03M
| | ├──78-数据仓库的分层.mp4 28.36M
| | ├──79-数仓的构建流程.mp4 30.14M
| | ├──80-数据调研.mp4 22.06M
| | ├──81-明确数据域.mp4 6.14M
| | ├──82-业务总线矩阵.mp4 19.58M
| | ├──83-明确统计指标.mp4 42.23M
| | ├──84-维度模型与汇总模型设计.mp4 12.98M
| | ├──85-hive引擎简介.mp4 12.67M
| | ├──86-hive on spark兼容性说明.mp4 13.51M
| | ├──87-搭建hive on spark.mp4 52.16M
| | ├──88-ApplicationMaster资源比例调整.mp4 26.73M
| | ├──89-datagrip使用.mp4 34.78M
| | ├──90-模拟产生数据.mp4 92.59M
| | ├──91-hive常见问题和解决方案.mp4 45.86M
| | ├──92-ods层设计要点.mp4 20.28M
| | ├──93-全量表建表.mp4 62.32M
| | ├──94-复杂数据类型回顾.mp4 54.65M
| | ├──95-json数据建表.mp4 38.48M
| | ├──96-增量表建表.mp4 41.55M
| | ├──97-ods数据加载脚本.mp4 101.52M
| | ├──98-维度表建模理论回顾.mp4 32.28M
| | └──99-dim层设计要点.mp4 17.20M
| ├──笔记.zip 36.61M
| ├──代码.zip 664.29kb
| └──资料.zip 2.87G
└──尚硅谷大数据项目之线上问诊实时数仓
| ├──视频
| | ├──01_线上问诊实时数仓课程介绍.mp4 24.32M
| | ├──02_采集项目数据采集回顾.mp4 96.37M
| | ├──03_线上问诊实时数仓概念介绍.mp4 10.53M
| | ├──04_线上问诊实时数仓核心架构介绍.mp4 17.15M
| | ├──05_实时数仓架构的具体操作流程.mp4 17.23M
| | ├──06_数仓建模ER模型介绍.mp4 17.47M
| | ├──07_数仓建模ER模型三范式介绍.mp4 40.77M
| | ├──08_数仓建模维度模型介绍.mp4 17.47M
| | ├──09_维度建模事实表简单概述.mp4 11.39M
| | ├──10_维度建模事务型事实表介绍.mp4 24.82M
| | ├──11_维度建模周期快照事实表.mp4 19.23M
| | ├──12_维度建模累积快照事实表.mp4 12.82M
| | ├──13_维度建模维度表设计流程.mp4 18.20M
| | ├──14_维度表设计规范化和反规范化.mp4 12.15M
| | ├──15_维度表设计维度变化的选择.mp4 15.73M
| | ├──16_维度表设计多值维度和多值属性.mp4 24.36M
| | ├──17_数仓分层规划.mp4 15.54M
| | ├──18_数仓构建流程简单介绍.mp4 14.76M
| | ├──19_数仓数据调研介绍.mp4 18.64M
| | ├──20_数仓分配数据域.mp4 7.35M
| | ├──21_数仓构建业务总线矩阵及维度模型设计.mp4 22.17M
| | ├──22_数仓指标体系分析.mp4 36.18M
| | ├──23_idea开发环境准备.mp4 28.01M
| | ├──24_flink的环境准备.mp4 15.89M
| | ├──25_hbase的环境部署.mp4 52.29M
| | ├──26_redis的环境部署.mp4 43.83M
| | ├──27_doris的fe部署.mp4 66.93M
| | ├──28_doris的be集群安装部署.mp4 36.32M
| | ├──29_doris的be集群bug解决.mp4 29.59M
| | ├──30_ods_使用kafka存储原始数据.mp4 42.35M
| | ├──31_dim_实时监控实现动态配置维度表元数据信息原理介绍.mp4 50.36M
| | ├──32_flinkCDC测试代码编写.mp4 406.51M
| | ├──33_dim_整体代码结构介绍.mp4 19.22M
| | ├──34_dim_流式环境创建的方法封装.mp4 57.78M
| | ├──35_dim_读取kafka主流ods层数据.mp4 371.17M
| | ├──36_dim_读取配置表数据.mp4 45.19M
| | ├──37_dim_封装hbase获取同步连接.mp4 387.22M
| | ├──38_dim_创建hbase中的维度表.mp4 111.18M
| | ├──39_dim_处理合并流完成主流过滤维度表的操作.mp4 156.03M
| | ├──40_dim_写出维度表数据到hbase.mp4 95.91M
| | ├──41_dim_维度表代码测试及整体逻辑回顾.mp4 161.00M
| | ├──42_dwd_flinkSQL的使用方法.mp4 43.92M
| | ├──43_dwd_使用flinkSQL读取ods层数据.mp4 37.03M
| | ├──44_dwd_问诊事实表筛选数据.mp4 36.57M
| | ├──45_dwd_问诊事务事实表数据写出.mp4 23.51M
| | ├──46_dwd_问诊支付成功事实表代码编写及演示.mp4 266.71M
| | ├──47_dwd_处方事实表代码编写.mp4 75.08M
| | ├──48_dwd_处方事实表数据测试.mp4 19.66M
| | ├──49_dwd_interval_join的原理介绍.mp4 203.93M
| | ├──50_dwd_处方开单支付事务事实表编写及测试.mp4 99.98M
| | ├──51_dwd_用户注册事务事实表.mp4 40.20M
| | ├──52_dwd_新增患者事务事实表.mp4 27.19M
| | ├──53_dwd_医生注册事务事实表.mp4 150.98M
| | ├──54_dws_医院性别年龄粒度问诊聚合需求介绍.mp4 33.35M
| | ├──55_dws_读取dwd层数据并转换结构.mp4 47.67M
| | ├──56_dws_使用异步连接优化维度关联.mp4 42.81M
| | ├──57_dws_旁路缓存优化介绍.mp4 18.41M
| | ├──58_dws_实现维度关联的抽象类设计.mp4 768.18M
| | ├──59_dws_实现医院id和患者信息的维度关联.mp4 58.25M
| | ├──60_dws_开窗聚合问诊次数及问诊金额代码及演示.mp4 86.14M
| | ├──61_dws_修复补全维度信息.mp4 206.63M
| | ├──62_dws_将javaBean保留需要的字段转换为jsonString.mp4 72.34M
| | ├──63_dws_doris写出工具类编写.mp4 41.66M
| | ├──64_dws_写出数据到doris演示.mp4 69.97M
| | ├──65_dws_问诊支付成功窗口聚合.mp4 128.08M
| | ├──66_dws_处方开单窗口聚合.mp4 528.74M
| | ├──67_dws_处方开单支付窗口聚合.mp4 44.18M
| | ├──68_dws_用户注册的窗口聚合.mp4 54.81M
| | ├──69_dws_患者添加窗口聚合.mp4 52.68M
| | ├──70_dws_医生注册窗口汇总.mp4 209.27M
| | ├──71_dws_医院粒度评价表使用状态找出新增评价.mp4 451.60M
| | ├──72_dws_医院粒度评价导出数据.mp4 44.72M
| | ├──73_大屏可视化流程介绍.mp4 50.23M
| | ├──74_大屏可视化内网穿透展示.mp4 27.51M
| | └──75_sugerBI实现可视化展示.mp4 28.07M
| ├──笔记.zip 25.46M
| ├──代码.zip 74.88kb
| └──资料.zip 5.52G |