数据仓库分层

2020-04-29  本文已影响0人  闻笛0213

ODS:Operation Data Store

原始数据(一般不建议全部存储,可按实际需求)

DWD(数据清洗/DWI) data warehouse detail

数据明细详情,去除空值,脏数据,超过极限范围的(需要存储)

明细解析

具体表

DWS(宽表-用户行为,轻度聚合) data warehouse service ----->有多少个宽表?多少个字段

服务层--留存-转化-GMV-复购率-日活

点赞、评论、收藏;

轻度聚合对DWD

ADS(APP/DAL/DF)-出报表结果 Application Data Store

做分析处理同步到RDS数据库里边

数据集市:狭义ADS层; 广义上指DWD DWS ADS 从hadoop同步到RDS的数据

上一篇下一篇

猜你喜欢

热点阅读