dwd和dws的区别
时间: 2024-06-12 20:08:41 浏览: 19
DWD和DWS是数仓中的两个不同层次。DWD层(数仓明细层)存储了经过ETL处理后的扁平化明细数据,主要用于满足需求、清洗和过滤数据。DWS层(数仓汇总层)则是对DWD层进行聚合和汇总,以提供更高层次的数据统计和分析。
具体来说,DWD层存储的是经过ETL处理后的原始数据的扁平化明细数据,一般使用orc或parquet文件格式进行存储,并且存储周期为6个月。在DWD层中,数据会进行清洗、过滤和解析,去除无用字段、脏数据以及缺少关键字段的记录,同时还会过滤错误的时间段记录和爬虫请求。
而DWS层则是在DWD层的基础上进行聚合和汇总,以提供更高层次的数据统计和分析。DWS层的数据内容是经过计算、聚合和变换的数据,可以用于支持各种业务分析或报表需求。
因此,DWD和DWS的区别在于数据的存储内容和用途。DWD层主要存储原始数据的扁平化明细数据,并进行清洗和过滤;而DWS层则是在DWD层的基础上进行聚合和汇总,以提供更高层次的数据统计和分析。
相关问题
数仓dws和dwd的区别
数仓DWS和DWD都是数据仓库的组成部分,但它们的功能和定位不同。
数据仓库DWD(Data Warehouse Detailed)是用于存储企业的详细业务数据和历史数据的中央数据存储库,可以满足企业数据分析和决策制定的需求。DWD通常包括多个维度和事实表,可以支持复杂的分析查询和报告。
而数仓DWS(Data Warehouse Summary)是用于存储和汇总企业数据的数据存储库,可以为企业提供高层次的概要信息,帮助企业更好地了解业务趋势和绩效表现。DWS通常包括汇总数据和指标,并提供简单的查询和报告。
因此,DWD主要面向数据分析师和业务用户,而DWS则主要面向高管和管理层,帮助他们更好地了解企业的整体业务情况和趋势。
数仓DWS和DWD的区别
数仓DWS和DWD都是数据仓库的组成部分,但它们的功能和定位不同。
数据仓库DWD(Data Warehouse Detailed)是用于存储企业的详细业务数据和历史数据的中央数据存储库,可以满足企业数据分析和决策制定的需求。DWD通常包括多个维度和事实表,可以支持复杂的分析查询和报告。
而数仓DWS(Data Warehouse Summary)是用于存储和汇总企业数据的数据存储库,可以为企业提供高层次的概要信息,帮助企业更好地了解业务趋势和绩效表现。DWS通常包括汇总数据和指标,并提供简单的查询和报告。
因此,DWD主要面向数据分析师和业务用户,而DWS则主要面向高管和管理层,帮助他们更好地了解企业的整体业务情况和趋势。
相关推荐
![html](https://img-home.csdnimg.cn/images/20210720083451.png)
![pdf](https://img-home.csdnimg.cn/images/20210720083512.png)
![pdf](https://img-home.csdnimg.cn/images/20210720083512.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)