odsdwdm之间的区别「数据仓库ods层」
2024-01-17 18:04:02
关注点赞转发，是我分享最大的动力
先看一下数据中心的整体架构以及数据流向：
DB 是现有的数据来源，可以为mysql、SQLserver、文件日志等，为数据仓库提供数据来源的一般存在于现有的业务系统之中。ETL的是 Extract-Transform-Load 的缩写，用来描述将数据从来源迁移到目标的几个过程：
Extract，数据抽取：把数据从数据源读出来。Transform，数据转换：把原始数据转换成期望的格式和维度。如果用在数据仓库的场景下，Transform也包含数据清洗，清洗掉噪音数据。Load 数据加载：把处理后的数据加载到目标处，比如数据仓库。ODS(Operational Data Store) 操作性数据：是作为数据库到数据仓库的一种过渡，ODS的数据结构一般与数据来源保持一致，便于减少ETL的工作复杂性，ODS的数据周期一般比较短；也就是原始数据的保存区域，存储来自各业务系统（消息队列）的原始数据。如：电商网站的访问日志（埋点的时候是以JSON存储），物联网终端设备实时发送的数据等原始数据直接存储在数据仓库的ODS层；ODS的数据最终流入DW。DW (Data Warehouse)数据仓库，是数据的归宿，这里保持这所有的从ODS到来的数据，并长期保持，而且这些数据不会被修改。DM(Data Mart) 数据集市：为了特定的应用目的或应用范围，从数据仓库中独立出来的一部分数据，也可称为主题数据，面向应用。郑重声明：本文版权归原作者所有，转载文章仅为传播更多信息之目的，如有侵权行为，请第一时间联系我们修改或删除，多谢。
相关文章
- b2b是什么意思「B2B市场」
- 电商配货如何提高效率「电商促销方式」
- 「身残志坚·脱贫光荣」李春喜：网店里“淘”出的幸福人生
- 长春金融高等专科学校菜鸟驿站「长春儿童冬令营」
- 小程序拼团功能怎么介绍「美团小程序请客」
- 电子商务与实体经济「电商发展对实体经济的影响」
- 会展中心汽博会「宝马城市展厅」
- 美团推出团购「美团闪购新客专享」
- 手工活在家兼职工作「没有手艺该找什么工作」
- 货源足保供应「保证货源充足」
- 长沙代购店「长沙自贸区」
- 美团外卖种类「美团外卖品类排行榜」
- 农村电商遇到的问题「农村电商面临的困难」
- 一条腿跑步「这一次你纵身一跃」
- 浙江淘宝村「浙江淘宝村在哪里」
- 在抖音做电商商家应该知道这些什么「抖音电商模式」
- 为什么越来越多的日化经销商要用商城小程序「怎么做好化妆品经销商」
- 舒客年销售额「舒客电商」