最新维度建模学习笔记

分享嘉宾：丘山，一线互联网数仓开发工程师

编辑整理：交个朋友

出品平台：小晨说数据

导读：小丘哥哥最近学习维度建模，整理了一些学习心得，跟大家一起分享一下，相互学习，共同进步，感觉好文章底部点个赞，鼓励一下小丘哥哥哈哈。

为什么要维度建模？

金融十大主题

数仓中3nf是面向主题的抽象，典型的代表是teradata发布的金融 FS-LDM，

为什么要分层？

维度建模的三种方法？

维度建模：维度建模是从分析的角度，将业务数据重新按照事实和维度的形式进行组合，用于度量某个业务过程

常用名词？

业务过程：业务过程是组织完成的操作性活动，例如下单、支付、退款都是业务过程。业务过程是一个不可拆分的行为事件
粒度：粒度是确定某一事实表的行表示的是什么，例如，订单粒度。粒度可已通过两种方式表述，一种是具体的业务含义，一种是维度属性组合所表示的细节程度
维度；用于描述业务过程中所涉及的，‘谁，什么，哪里，合适，如何，为什么’等背景，是分析问题的一个窗口，是人们观察数据的特定的角度，一类属性的集合构成一个维度，例如地理维度，包含了国家，省市区等级别的内容
维度属性：维度属性隶属于一个维度，读地理维度的国家名称，省份名称等都属于维度属性
事实：表示对业务过程的度量，事实通常是数字类型的，可以进行聚合和计算，例如下单金额

维度建模四个步骤？

维度设计基础

（1）维度常用建

（2）维度层次结构

作用：可以沿着维度的属性层次进行钻取
固定深度：层次固定的维度属性，例如日期维度的年、季度，月
可变深度：轻微层次不齐，但具有最大深度，最常见的是行政区划，通常3-6级别，还有一些深度不确定的层次，通过递归父子关系实现链接，常见的有类目，部门组织结构等，通常的做法是将其打平，转化为固定深度

（3）规范化与反规范化

（4）维度的整合与拆分

（5）杂项维度与退化维度

（6）维度的缓慢变化

（7）快照维度

（8）一致性维度

一致性有哪些好处

一致性维度必要性：保证数据协调和集成，需要具有一致性维度的企业总线

事实的特点？

事实表三种？

（1）事务事实表：存储的是发生某个时间点上的一个事件，最明显的特点是无修改操作，仅追加记录。包括，单事务事实表、多事务事实表

（2）周期快照事实表：用于观察某个业务某个固定周期内的累计度量，最简单的一个按理为门店商品库存周期快照事实表

（3）累计快照事实表：用于定义过程开始，结束以及期间的可区分的里程碑，一个订单一条记录，多个业务过程数据会更新。（需要确定生命周期，才能确定回刷范围）

维度建模原则

高内聚和低耦合：从业务特看，业务相近相关，粒度相同的设计到一个模型中，相关度比较高的部分尽可能的集中，不要分散低耦合就是说两个相关的模块尽可以能把依赖的部分降低到最小，不要让两个系统产生强依赖；从访问特性考虑，将高概率同时访问数据放一起，低概率同时访问的分摊存储
公共处理逻辑下沉及单一
成本性能的平衡（不要过度建模）
数据可回滚
一致性

0 人点赞