页面树结构
转至元数据结尾
转至元数据起始

正在查看旧版本。 查看 当前版本.

与当前比较 查看页面历史

« 前一个 版本 9 下一个 »

1 概述

Smartbi的数据模型实现将所有查询结果归集后,基于CUBE模型重新构建数据结构:以“维度”和“度量”进行构建,同时增加了“成员”和“命名集”的定义,实现了数据模型构建的灵活性及应用广泛性。

Smartbi的数据模型基于成熟的建模理论和方法,总体而言主要体现在两方面:模型架构和模型表关系。

2 模型架构

数据模型是围绕事实表和维度表的关系而进行模型的构建:

  • 事实表:是数据模型中的中央表,它包含联系事实与维度表的数字度量值和键。事实数据表包含描述业务(例如产品销售)内特定事件的数据。
  • 维度表:是维度属性的集合,是分析问题的一个窗口,是人们观察数据的特定角度,是考虑问题时的一类属性,属性的集合构成一个维。

Smartbi支持星型模型、雪花模型和星座模型、单表模型。

2.1 星型模型

星型模型:所有维表都直接连接到事实表上,整个视图就像星星一样,是推荐的模型结构。

事实表是中心的核心,而维度表提供了与事实相关的上下文信息。每个维度表都与事实表存在一对多的关系,通过共享的键值进行连接,就像星星的射线连接到中心。

这种结构让可以灵活地按照不同的维度对数据进行筛选和分析,就像可以从不同的角度观察星星。

 星型架构原则:

  • 维度表支持筛选和分组
  • 事实数据表支持汇总

建模者没有设置将表类型配置为维度或事实的表属性, 这实际上是由是否有设置度量决定的,如果表或者查询设置了度量,则代表事实表。

模型关系在两个表之间建立筛选器传播路径,并且它是确定表类型的关系基数属性 。

常见关系基数为“一对多” 或反过来的“多对一” 。

该关系中的“一”这一方始终是维度类型表,而“多”始终是事实类型的表。

若要详细了解关系,请参阅 Smartbi 中的模型关系


2.2 雪花模型

雪花模型与星型模型类似,都包含了事实表和维度表。但在维度表的组织方式上有所不同。在雪花模型中,维度表被细分成多个规范化的表格,形成了多层级结构,就像雪花一样。

视图如下:

雪花模型是对星型模型的扩展,它对星型模型的维表进一步层次化,原有的各维表可能被扩展为小的事实表,形成一些局部的 "层次 " 区域,这些被分解的表都连接到主维度表而不是事实表。如将产品维表分解为产品类别维表。

2.3 星座模型

星座模型:包含多个事实表,维表是公共的,可以共享,视图如下:


2.4 单表模型

可以理解为一张大宽表,指标、维度、属性关联在一起的一张表,如下图:

3 模型相关概念

我们在Smartbi设计数据模型架构前,需要对模型设计紧密相关的概念有清晰的认识和理解:

3.1 度量值

度量值是存储要汇总的值的事实数据表列。

Smartbi数据模型中的度量值表达式通常利用 聚合函数(如 SUM、MIN、MAX、AVERAGE 等)在查询时生成标量值结果(值永远不会存储在模型中)。

度量值表达式涵盖广泛,从简单的列聚合到更复杂的公式应有尽有,这为模型开发者提供了便利,因为在很多情况下都无需写MDX表达式创建度量值: 如“订单明细”表中的“销售量”列可以通过多种方式进行汇总(包括 SUM、COUNT、AVERAGE、MEDIAN、MIN、MAX 等)。

3.2 雪花维度

雪花维度是单个业务实体的一组规范化表 。例如:“产品”维度经过了规范化并存储在两个相关表中:产品类别维度和产品维度。这些规范化表位于事实数据表之外,形成雪花形状的设计。

在 Smartbi数据模型 中,可以选择模仿雪花维度设计,也可以将源表(非规范化)通过私有查询的方式集成到单个模型表中。如下图所示:

一般而言,单个模型表的优点比多个模型表的优点更多,最理想的决策取决于数据量和模型的可用性要求。

在选择集成到一个模型表中时,还可以定义一个层次结构,其中包含维度的最高和最低粒度。 冗余非规范化数据的存储可能会增加模型存储大小,尤其是在维度表很大的情况下。

3.3 角色扮演维度

角色扮演维度是能以不同方式筛选相关事实的维度 。 例如,在Northwind中,订单维度表与订单销售明细事实之间有三种关系:可以使用同一维度表中按订单日期、发货日期或交货日期筛选事实。

数据仓库中接受的设计方法是定义单个日期维度表。 在查询时,日期维度的“角色”是通过用于联接表的事实列建立的。 例如,在按订单日期分析销售情况时,表联接与订单日期列相关。

在Smartbi数据模型中,我们用一种常见的建模方法解决,就是为每个角色扮演实例创建维度类型表。 该模型可以包含日期表、发货日期表和交货日期表,每个表与其对应的销售表列之间都存在单一且活动的关系 。

3.4 杂项维度

如果有多个维度,特别是包含几个属性(可能只有一种)并且这些属性的值很少时,则杂项维度非常有用 。

合适的候选项包括订单状态列或客户人口统计列(性别、年龄分组等)。

杂项维度的设计目标是将多个“小”维度合并为一个维度,以减少模型的存储大小,还可以通过呈现更少的模型表来缓解“字段”窗格的混乱情况 。

杂项维度表通常是所有维度属性成员的笛卡尔积,具有唯一标识列。 可以在数据仓库中构建维度,也可以通过使用Smartbi数据模型中的私有查询创建,并此查询作为维度类型表加载到模型中。

3.5 退化维度

退化维度指的是筛选所需的事实数据表的属性 。 我们的northwind中就有一个例子,就是销售订单号。 在这种情况下,创建仅包含这一列的独立表对模型设计并没有什么积极作用,因为这会增加模型的存储大小,并导致“字段”窗格混乱 。

在Smartbi模型中,可以将销售订单号列添加到事实类型表,以允许按销售订单号进行筛选或分组。 

3.6 无事实事实数据表

无事实事实数据表不包含任何度量值列 。 它仅包含维度键。

无事实事实数据表可以存储由维度键定义的观察值。 例如,在特定日期和时间,特定客户登录到你的网站。 你可以定义一个度量值以对无事实事实数据表中的行进行计数,从而对客户的登录时间和数量进行计数分析。

无事实事实数据表的更有力的用途是存储维度之间的关系,例如,假设销售人员可以分配到一个或多个销售区域 , 则需要设计为包含两列的无事实事实数据表:销售人员键和区域键, 这两列中可以存储重复的值。

3.7 模型表关系

模型设计过程中,模型表的关系也是很重要的一项内容,详细可查阅:设置查询关系

关系的确立需要通过匹配键列中的数据(通常是两表中同名的列)。在大多数情况下,该关系会将一个表中的主键(它为每行提供了唯一标识)与另一个表的外部键中的某项相匹配。例如,通过创建 orderdetails表中的 orderid(主键)与orders 表中的 orderid 列(外部键)之间的关系,则销售量就与订单相关联了。

3.7.1 一对多(多对一)关系

一对多和多对一是相对关系,如下列的课程表与老师表:

站在课程表的角度看是:多对一;站在老师表的角度看是:一对多。

在一对多或多对一的关系中,我们习惯把一的一方称为主表,把多的一方称为从表。

在数据库中建立一对多的关系,需要使用数据库的外键约束:

Course表中的T_id字段建立外键约束,指向Teacher表中的T_id。

3.7.2 一对一关系

在一对一关系中,A 表中的一行最多只能匹配于 B 表中的一行,反之亦然。比如,一个人只能有一个身份证号,一个身份证号只能属于一个人。

如果相关列都是主键或都具有唯一约束,则可以创建一对一关系。

这种关系并不常见,因为一般来说,按照这种方式相关的信息都在一个表中。可以利用一对一关系来:

  • 分割具有多列的表。
  • 由于安全原因而隔离表的一部分。
  • 保存临时的数据,并且可以毫不费力地通过删除该表而删除这些数据。
  • 保存只适用于主表的子集的信息。

3.7.3 多对多关系

多对多的关系,可以看成是两个多对一的关系,如下的课程表和学生表:

站在课程表的角度,一门课可以被多个学生选择,是多对一的关系;站在学生表的角度,一个学生可以选择多门课程,是多对一的关系。

这两个表的多对多关系,通过一张关联表来建立关联:

101课程被学号1、学号2的学生选择;学号1的学生同时选择了101、202、303的课程。

目前Smarbi数据模型构建仅支持一对多(多对一)和一对一关系。

4 模型选型

星型模型和雪花模型在架构体系中各有优劣,其对比如下:

区别项

星型模型

雪花模型

维度表

一级维度表

多级维度表(子维度表)

存储空间

数据冗余度

表宽度

扩展性

Join复杂度

查询逻辑

简单

查询速度

可读性

简单

OLAP建模工具优化度

数据总量
可读性容易
表个数

在实际业务场景中,往往是两种模型的综合应用。



  • 无标签