第20页，共164页。 显示 1,631 条结果 (0.05 秒)
Excel融合分析如何处理超大数据量
提前进行数据过滤、数据汇总，将清单数据在数据库层面进行加工，提升性能。 多表查询 创建自助数据集，数据抽取到高速缓存库SmartbiMPP 抽取用户需要的数据，存储到缓存数据库中进行分析；这样不但能够减少原始数据仓库的压力，也能获得很好的分析性能。 2.2 Excel插件端优化操作 … 图：透视分析 方式2.创建自助数据集，数据抽取到高速缓存库SmartbiMPP 假设已有透视分析的聚合数据、即席查询的明细数据，为了满足多个报表查询的业务需求，对此我们可创建自助数据集 https://wiki.smartbi.com.cn/pages/viewpage.action?pageId创建目录
1 概述 在建模过程中，可以通过创建目录的方式来管理维度、度量，让用户在建模、分析的过程更易懂。 字段通过目录重新归类： 1、维度、度量、命名集、计算成员支持了多级目录。新建子目录，可以支持多级，没有级数限制。 1、字段移动到其他新目录，不影响表或查询(原目录)的数据预览、表字段属性、抽取。 2、字段拖入到 … 例进行说明。 具体操作步骤如下： 1、创建数据模型，并且在模型中加入“产品表”、“产品类别表” 2、在 维度区域 创建目录,并且支持创建多级目录： (1)方式1： 如下图，先选择”产品类别表“下的 产品类别 字段，然后右键菜单 新建目录，创建目录并且把目录命名为”产品信息“, ”产品类别“会自动代入到Java数据集
多重表头 对Java数据集的表头进行重定义。 参数布局 调整参数在某Java数据集对应的报表中的位置。 Excel模板设置 把当前Java数据集的数据结果填充到用户自定义的Excel模板中。 高级设置 用于设置当前Java数据集的缓存策略： 自动缓存：表示采用缓存策略。 即若在未清空缓存的前提下，基于当前Java数据集定制的报表在第一次打开并刷新数据后，读取的数据存储在缓存中； 再次打开报表刷新数据时会从缓存中读取数据，从而提高数据查询速度。 禁止缓存：表示禁止缓存策略。 系统设置：表示采用 系统选项 > 公共设置 > 自动缓存 httpJava数据集
。 Excel模板设置 把当前Java数据集的数据结果填充到用户自定义的Excel模板中。 高级设置 用于设置当前Java数据集的缓存策略： 自动缓存：表示采用缓存策略。 即若在未清空缓存的前提下，基于当前Java数据集定制的报表在第一次打开并刷新数据后，读取的数据存储在缓存中； 再次打开报表刷新数据时会从缓存中读取数据，从而提高数据查询速度。 禁止缓存：表示禁止缓存策略。 系统设置：表示采用 系统选项 > 公共设置 > 自动缓存 中的设置。 预览数据 对新建或修改的Java数据集进行预览。 数据抽取 用于将当前数据集的数据抽取到MPP。 创建 可基于当前TiDB数据连接
”后，会自动在“连接字符串”结尾添加“&useCursorFetch=true&defaultFetchSize=-2147483648”，用于优化内存占用，在抽取千万级别的海量数据到高速缓存库时能显著提高数据抽取性能。 允许加载Excel数据：在勾选“允许加载Excel数据”后，可以在文件导入的时候选择该数据源MySQL数据连接
据量兼容”和“允许加载Excel数据”两个配置项进行选择： 大数据量兼容：默认勾选。针对MySQL类型数据库的一个策略，在勾选“大数据量兼容”后，会自动在“连接字符串”结尾添加“&useCursorFetch=true&defaultFetchSize=-2147483648”，用于优化内存占用，在抽取千万级别的海量数据到高速缓存库时能显著提高数据抽取性能。 2.3 测试连接 1、信息正确输入后，点击 测试连接 ，若出现如下图的 测试通过 弹出框，则表示可以成功连接上数据库。如下图所示： 506.png 2、测试连接成功后，点击右下角的 保存 按钮，选择数据源的保存位置，保存成功后，该数据连接即添加成功。如下图所示数据模型校验
1 概述 1.1 背景 在数据模型的编辑、使用过程中，因表结构错误、计算逻辑异常、参数配置不当等问题，常导致查询或抽取数据时出现报错。为解决这一痛点，Smartbi针对数据模型”校验“功能进行增强，旨在帮助用户快速定位并修复模型问题，减少问题排查成本，提升数据处理效率。 1.2 核心价值 自主解决问题：支持 … 看一下有无异常问题： 1、在数据模型编辑页面，点击工具栏的 校验 按钮。 2、弹出 数据模型校验 对话框，显示所有待检查项目（如：表 / 查询信息、计算逻辑、参数设置等），会自动依据顺序检查： jiaoyan.png 单个检查：在列表中找到需检查的项目，点击【检查】按钮。 全部检查：点击右上角【检查全部】按钮，系统将指标管理 ⬝ 创建事实表
据准备，进入已创建指标模型，选择 存储管理，选择 事实表，点击 新建 ，系统支持三种方式新建事实表：根据指标新建、根据维度新建、手动新建。 rukou.png 2.1.1 根据指标新建 根据指标新建事实表前提：已经创建好全部或部分指标。使用根据指标新建事实表时，事实表自动包含选取的指标及指标依赖的维度。 1 … 创建好全部或部分维度。 使用根据维度新建事实表时，事实表自动包含选取的维度。 1、在“选择维度”窗口，勾选维度： image2022-1-1_9-17-18.png 2、系统生成包含勾选维度的事实表，用户在此基础上创建其它指标及维度。 image2022-2-25_17-24-27.png 2.1.3 手动数据预览
1 概述 系统支持对整个数据模型的结果预览，可以快速的查询数据。 2 操作说明 1、若数据模型含有参数，预览的是参数默认值返回的数据结果。 2、如模型为抽取模式，预览的是上一次抽取后的数据；直连模式则是实时取业务库的数据。 3、如果预览数据量较大，用户可以自动手动取消查询请求。 4、注意：整个模型的数据预览与 表数据区预览数据之间的关系，二者定位不同；前者主要用于查数，后者更多是为了发现建模过程种的问题，只是显示私有查询的表数据，不会做其他操作。 5、可能对设置及修改查询感兴趣。 数据模型保存后，单击工具栏中的 预览数据 按钮，在显示预览窗口查看数据： 选项 内容 入口 点击工具栏的 预览指标模型-模型管理
指标，右侧自动显示勾选指标关联的维度 公共维度：是指所有勾选的指标都关联的维度，且默认勾选全部公共维度。 私有维度：当勾选的指标中，存在至少一个指标不关联该维度时，则为私有维度。私有维度默认不勾选。 2023-01-31_18-41-17.png 3、点击 保存 生成数据模型后，在“模型管理”节点下生 … ，其维表和事实表的关系自动生成，指标模型与数据模型的转化对应关系如下： 指标模型对象 数据模型对象 关联说明 指标分类 度量目录 所有要添加到数据模型中的指标对应的指标分类。 指标 度量 若勾选了计算指标，则根据计算指标的表达式找到所有关联的原子指标，并全部添加到数据模型中。 维度
