第182页,共563页。 显示 5,628 条结果 (0.08 秒)
ETL-如何开启旧节点
(文档仅供参考) 问题描述: 从V10.5.8升级到V10.5.15以后,发现部分节点做了合并(相关文档介绍:Smartbi V10.5.12-数据准备): 1、新版本的数据清洗合并了旧版本中的空值处理、值替换、数据清理节点; 2、行过滤节点则是将之前的过滤节点和 … 开放。 1、值替换节点,DISABLE_VALUE_REPLACE_NODE=false 2、数据清理节点,DISABLE_DATA_CLEANING_NODE=false 3、过滤节点,DISABLE_FILTERING_MAPPING=false 4ETL-上传Excel文件英文括号变成两个双引号
(本文档仅供参考) 问题现象 使用ETL的Excel文件上传功能,英文括号会两个双引号,见下图 image2024-2-27_10-1-26.png 原因 数据源节点使用的excel节点。由于可能存在xss攻击问题,excel节点对于单元格内的一些特殊字符进行转义处理,其中就包括英文的括号。因此英文 … 、用BI的excel文件数据源,将excel数据落到一张表中,然后ETL用关系数据源节点来读这张表; 方案三、用【数据清理】节点的正则替换(相关表达式:"([^"]*)"$),将引号转回括号,具体如下图。 image2024-2-27_10-5-4.png在计算列中使用CASE WHEN实现动态计算
1 背景 客户想动态计算以显示正确的成本数据。 2 场景描述 2.1数据展示 ID 关联方属性 内部分包对应主合同 确认成本 确认收入 1 内部 无对外主项目 5000 3000 2 外部 有对外主项目 6000 4000 3 内部 有对外主项 … 通常不会直接影响公司的外部财务报表,因此直接使用确认成本作为最终的成本。 对于所有其他情况:包括外部合同或内部但有对外主项目的合同,需要从确认成本中减去确认收入,以便准确反映这些项目的实际经济效果。 3 具体操作 1、如果想复现示例,需要先把示例数据导入到模型中或者把文件导入到业务库中,详细查看:文件计算列实现场景介绍
1 背景 在日常产品使用的过程中,很多用户提出各种各样的场景,整理之后统一放在这里供大家参考,后续会不断补充完善。 1、计算列相关信息,可以查看:计算列。 2、在数据模型引擎V2.0上新增了50+函数,详情查看:计算列函数。 3、计算列数据库适配情况,查看:计算列函数数据库适配情况 https … 日期格式 场景描述:底层表是字符串类型,数据是20241001的格式,希望转换成2024-10-01。 1、创建计算列,使用 STRTODATE 函数进行转换: datetostr.png 2、创建好之后预览数据,结果如下: strtodate.png 2.2 拼接字符串 场景描述:把订单模型订单202410产品更新说明
十月阳光洒大地, 金风送爽满心扉。 丰收喜悦共分享, 梦想起航勇向前。 1 发布月份 2024年 10月 2 更新概览 1、强化数据安全性:新增 导出规则 功能,让用户能够灵活地控制特定用户对资源的导出权限,以满足高安全级别数据的管理需求。 2、兼容更多数据库:新版本新增对 Doris 和 GoldenDB 数据库的支持,极大增强了数据源的接入能力,能够应对更多复杂业务场景。 3、增强数据分析和提高查询效率:新版本进一步优化了数据模型部分查询场景的性能、ETL新增模型明细查询&模型汇总查询数据接入方式、即席查询的数据来源支持选择数据源的业务视图等。 4、提升用户体验:我们优化了仪表盘组件的加载动画效果,改善视觉体验表相关操作
是指对数据库管理添加进来的表进行一些功能操作。主要包含表属性、数据快查、同步表和复制表。 表属性 表属性包含表、视图的表属性和存储过程表属性。 其中表、视图的表属性为系统允许用户对关系数据源中的基础字段定义为用户可以理解的别名、设置数据格式、修改数据类型,并显示在客户端,以方便用户的使用,实现语义层定义。 存储过程表属性设置是创建存储过程数据集的必要条件,需检测参数、结果集,并对字段参数的显示名称、类型、数据格式等进行设置。 此处设置不会对数据库表产生影响。只是用于产品中的显示效果。 表属性操作入口:双击表名 shujulianjie4.png 表和视图的“表属性” 表属性管理是指对表和视图这两类数据库资源进行回写 - 文件上传下载添加条件的筛选
://history.wiki.smartbi.com.cn/pages/viewpage.action?pageId=35750793 image2020-8-26_19-46-49.png 但是这个文档上都是直接拖拽的数据源,数据源里不能够设置筛选参数 解决方案: 1.在数据集中关联参数 2.再在电子表格设计器里面,将数据集的字段拖拽到单元格上,依此来引入参数 3.对相应字段设置过滤(多数据集关联实现可以参考此文档:电子表格⬝ 多数据集报表),通过参数来进行关联,从而筛选出对应数据 4.最终预览效果如下: image2020-8-26_19-47-50.png image2020-8-26_19-48-29.png【接口】仪表盘交叉表隐藏唯一度量列头
一、场景说明 1.1 背景 仪表盘的交叉表度量名称列头当只有一个度量时,不显示列头。 支持V10.5.8版本,V11版本已经可以通过交叉表设置项隐藏 1.2场景 引用数据模型的交叉表,会默认生成度量名称显示到列区。当只有一个度量列时,无法配置让其不显示。 (1)产品效果: (2)目标效果:数据 … :只作用于引用数据模型,其他数据集类型的交叉表没有问题效果。 2、添加扩展包:MacroInterface.ext 参考:部署扩展包 3、参考下方示例添加宏代码,也可以下载 migrate SMS-41117-测试资源.xml 通过系统的“导入资源” 导入到系统查看示例。 示例宏代码: /** * 类型计算度量与计算列的区别
1 概述 在数据分析领域,计算列和计算度量是极为常用的数据加工方式。 计算列在数据模型的表层面,通过给模型中指定表/查询添加新的物理列实现数据的二次计算与转换; 计算度量则借助多维表达式(MDX),以虚拟字段的形式,在报表生成阶段动态完成计算任务。由于两者特性各异,在实际应用场景中,我们需依据具体需求,灵活选择计算列和计算度量,实现高效的数据处理与分析。 2 计算类型使用场景介绍 类型 场景描述 适用功能 明细级别计算 数据源行级别计算、转换字段类型、数据分割等 计算列、分组字段 聚合/汇总计算 求平均值、最大值、求和等 原子度量、计算自助ETL-节点介绍
节点面板,用于显示当前流程中可使用的各种数据处理节点(输入、输出、转换、统计分析、脚本),顶端的搜索框支持输入名称进行搜索。 1. 输入(数据源) Smartbi支持从以下几个数据来源中导入数据: 节点 说明 关系数据源 https://wiki.smartbi.com.cn/pages/viewpage.action?pageId=114996974 关系数据源,是指从关系数据库中读取表数据。 数据查询 https://wiki.smartbi.com.cn/pages/viewpage.action?pageId=69737202#ETL%E9%AB%98%E7%BA%A7%E6