一线数据架构全新技术！P7级大数据项目实时项目实战课程 以架构师视角实战数据仓库

摘要： 一线数据架构全新技术！P7级大数据项目实时项目实战课程 以架构师视角实战数据仓库 一线数据架构全新技术，在目前主流的大数据仓库技术基础之上，再次做了拔高和加深。课程在很多...

一线数据架构全新技术！P7级大数据项目实时项目实战课程 以架构师视角实战数据仓库

 一线数据架构全新技术，在目前主流的大数据仓库技术基础之上，再次做了拔高和加深。课程在很多技术点上都做集成了时下最新得大数据实时数据仓库技术，是当下非常前沿都数据仓库项目技术。课程旨在帮助同学们尽快进行大数据仓库技能都提升，大数据技术是一个非常庞大复杂都系统，所以在每一次项目课程上都要抓住细节，尽可能都要丁准技能核心，抓住每一次提升技能的机会，对同学们在工作中会有非常大都提升。

===============课程目录===============


(1)\工具；目录中文件数:7个
├─apache-phoenix-4.14.2-HBase-1.3-bin.tar.gz
├─canal.deployer-1.1.4.tar.gz
├─maxwell-1.25.0.tar.gz
├─nginx-1.12.2.tar.gz
├─phoenix-4.14.2-HBase-1.3-client.jar
├─squirrel-sql-3.9.1.zip
├─squirrel驱动配置图.png
(2)\笔记；目录中文件数:11个
├─clickhouse复习上.txt
├─clickhouse复习下.txt
├─dsl课堂.txt
├─dsl课堂下.txt
├─sql另两个答案.txt
├─复习es上.txt
├─复习es下.txt
├─端午节作业(附答案说明).txt
├─端午节作业.txt
├─第八天复习.txt
├─课堂ppt.pptx
(3)\视频；目录中文件数:0个
(4)\课件；目录中文件数:12个
├─clickhouse1.0.5.docx
├─ElasticSearch安装.docx
├─ElasticSearch课件1.22.docx
├─大数据实时项目(ads层) .docx
├─大数据实时项目(dws层)1.2.docx
├─大数据实时项目(交易额).docx
├─大数据实时项目(日活）.docx
├─大数据实时项目(日活）1.6.1.docx
├─大数据实时项目(采集部分).docx
├─总结 (2).jpeg
├─总结.mmap
├─课堂ppt.pptx
(5)\资料；目录中文件数:4个
├─base_province表数据.sql
├─gmall0105.sql
├─gmall2020-mock.zip
├─log4j.properties
(6)\工具\1；目录中文件数:1个
├─phoenix-5.1.0-SNAPSHOT-hbase-2.2.tar.gz
(7)\工具\clickhouse；目录中文件数:4个
├─clickhouse-client-20.4.5.36-2.noarch.rpm
├─clickhouse-common-static-20.4.5.36-2.x86_64.rpm
├─clickhouse-common-static-dbg-20.4.5.36-2.x86_64.rpm
├─clickhouse-server-20.4.5.36-2.noarch.rpm
(8)\工具\elasticsearch相关；目录中文件数:3个
├─elasticsearch-6.6.0.tar.gz
├─elasticsearch-analysis-ik-6.6.0.zip
├─kibana-6.6.0-linux-x86_64.tar.gz
(9)\工具\hbase2.0.5；目录中文件数:3个
├─apache-phoenix-5.0.0-HBase-2.0-bin.tar.gz
├─hbase-2.0.5-bin.tar.gz
├─大数据技术之HBase.docx
(10)\笔记\为了看到双流丢失数据的现象发送低频数据配置；目录中文件数:2个
├─application.properties
├─BaseDbMaxwell 中发送频率增加500毫秒延迟，用户表只保留300个用户
(11)\视频\第一天上午；目录中文件数:4个
├─1、项目介绍.wmv
├─2、离线+实时框架.wmv
├─3、模拟数据发送.wmv
├─4、springboot日志接收.wmv
(12)\视频\第一天下午；目录中文件数:6个
├─1、logback落盘日志.wmv
├─2、git导入的问题.wmv
├─3、发送kafka.wmv
├─4、部署到linux.wmv
├─5、群启脚本.wmv
├─6、nginx部署.wmv
(13)\视频\第七天上午；目录中文件数:4个
├─1、复习.wmv
├─2、canal的高可用实现.wmv
├─3、ods层数据分流.wmv
├─4、maxwell的安装及ods层数据分流.wmv
(14)\视频\第七天下午；目录中文件数:3个
├─1、关于canal和maxwell发送多分区.wmv
├─2、需求二分析.wmv
├─3、sql题1.wmv
(15)\视频\第三天上午；目录中文件数:5个
├─1、es复习.wmv
├─2、自定义词库.wmv
├─3、mapping.wmv
├─4、别名.wmv
├─5、索引模板.wmv
(16)\视频\第三天下午；目录中文件数:2个
├─1、数据保存操作.wmv
├─2、数据查询操作.wmv
(17)\视频\第九天上午；目录中文件数:3个
├─1、完成省市热力图.wmv
├─2、订单明细dwd流准备.wmv
├─3、双流join的问题.wmv
(18)\视频\第九天下午；目录中文件数:6个
├─1、验证双流join的处理.wmv
├─2、双流join的另一种处理方法.wmv
├─3、join优化.wmv
├─4、计算实付分摊值思路.wmv
├─5、思路总结.wmv
├─7、作业.wmv
(19)\视频\第二天上午；目录中文件数:5个
├─1、采集部署的问题.wmv
├─2、es介绍.wmv
├─3、几种数据库的比较.wmv
├─4、特性与索引.wmv
├─5、安装es.wmv
(20)\视频\第二天下午；目录中文件数:5个
├─1、kibana安装.wmv
├─2、 es数据对象的介绍.wmv
├─3、 es的数据结构.wmv
├─4、 es插删改.wmv
├─5、 查询dsl.wmv
(21)\视频\第五天上午；目录中文件数:5个
├─1、简单回顾.wmv
├─2、精确一次消费的概念.wmv
├─3、相关问题解答.wmv
├─4、手动偏移量的处理思路.wmv
├─5、手动读取偏移量.wmv
(22)\视频\第五天下午；目录中文件数:3个
├─1、手动保存偏移量.wmv
├─2、幂等性处理.wmv
├─3、kibana可视化配置.wmv
(23)\视频\第八天上午；目录中文件数:4个
├─1、复习.wmv
├─2、phoenix工具.wmv
├─3、查询用户状态.wmv
├─4、维护用户状态.wmv
(24)\视频\第八天下午；目录中文件数:4个
├─1、同批次标志修正.wmv
├─2、维表写入思路.wmv
├─3、维表的写入.wmv
├─4、维表的关联.wmv
(25)\视频\第六天上午；目录中文件数:4个
├─1、复习.wmv
├─2、发布数据接口功能.wmv
├─3、发布查询接口_总数.wmv
├─4、发布查询接口_分时值.wmv
(26)\视频\第六天下午；目录中文件数:2个
├─1、canal简介.wmv
├─2、canal的安装.wmv
(27)\视频\第十一天上午；目录中文件数:5个
├─1、复习clickhouse.wmv
├─2、replacingMergeTree.wmv
├─3、summingMergeTree.wmv
├─4、基本操作.wmv
├─5、副本.wmv
(28)\视频\第十一天下午；目录中文件数:2个
├─1、分片集群.wmv
├─2、数据写入.wmv
(29)\视频\第十三天上午；目录中文件数:4个
├─1、包冲突问题.wmv
├─2、接口开发.wmv
├─3、datav可视化配置.wmv
├─4、总结上.wmv
(30)\视频\第十三天下午；目录中文件数:5个
├─1、总结2.wmv
├─2、总结3.wmv
├─3、总结4.wmv
├─4、sql1.wmv
├─5、sql3.wmv
(31)\视频\第十二天上午；目录中文件数:4个
├─1、clickhouse复习.wmv
├─2、查询接口开发1.wmv
├─3、查询接口开发2.wmv
├─4、ads层思路选型.wmv
(32)\视频\第十二天下午；目录中文件数:2个
├─1、ads层写入1.wmv
├─2、ads层写入2.wmv
(33)\视频\第十天上午；目录中文件数:4个
├─1、作业-维度关联.wmv
├─2、作业-维度关联-调试.wmv
├─3、作业-分摊金额.wmv
├─4、clickhouse安装.wmv
(34)\视频\第十天下午；目录中文件数:2个
├─1、clickhouse特性、数据类型.wmv
├─2、clickhouse表引擎.wmv
(35)\视频\第四天上午；目录中文件数:5个
├─1、复习1.wmv
├─2、复习2.wmv
├─3、架构.wmv
├─4、消费数据.wmv
├─5、格式转换redis工具.wmv
(36)\视频\第四天下午；目录中文件数:2个
├─1、redis去重.wmv
├─2、es的批量保存.wmv
(37)\资料\SQL题；目录中文件数:6个
├─ali面试题.png
├─sql1答案.txt
├─sql另两个答案.txt
├─数据样本.txt
├─面试sql.docx
(38)\资料\模拟器-用户行为；目录中文件数:4个
├─application.properties
├─gmall2020-mock-log-2020-05-10.jar
├─logback.xml
├─path.json
(39)\资料\模拟器_数据库；目录中文件数:3个
├─application.properties
├─gmall2020-mock-db-2020-05-18.jar
├─记得修改mysql地址，建议用户个数只保留100个
(40)\工具\clickhouse\19版本；目录中文件数:4个
├─clickhouse-client-19.17.9.60-2.noarch.rpm
├─clickhouse-common-static-19.17.9.60-2.x86_64.rpm
├─clickhouse-common-static-dbg-19.17.9.60-2.x86_64.rpm
├─clickhouse-server-19.17.9.60-2.noarch.rpm
(41)\视频\第九天下午\双流join缓存版视频；目录中文件数:3个
├─2、双流join的问题.wmv
├─3、双流join2.wmv
├─4、双流join2.wmv