300字范文,内容丰富有趣,生活中的好帮手!
300字范文 > 大数据电商数据仓库系统搭建 附离线安装包

大数据电商数据仓库系统搭建 附离线安装包

时间:2021-12-13 15:56:53

相关推荐

大数据电商数据仓库系统搭建 附离线安装包

一、数仓理论

1、数据仓库概念

数据仓库(Data Warehouse),是为企业所有决策制定过程,提供所有系统数据支持的战略集合。通过对数据仓库中数据的分析,可以帮助企业,改进业务流程、控制成本、提高产品质量等。

数据仓库,并不是数据的最终目的地,而是为数据最终的目的地做好准备。这些准备包括对数据的:清洗,转义,分类,重组,合并,拆分,统计等等。

2、数仓分层概念

1. 数据仓库分层

ODS层:原始数据层,存放原始数据,直接加载原始日志、数据,数据保持原貌不做处理。

DWD层:结构和粒度与原始表保持一致,对ODS层数据进行清洗(去除空值,脏数据,超过极限范围的数据),也有的叫DWT。

本内容不代表本网观点和政治立场,如有侵犯你的权益请联系我们处理。
网友评论
网友评论仅供其表达个人看法,并不表明网站立场。