第1页，共561页。 显示 5,602 条结果 (0.041 秒)
数据模型-字符串转日期异常（数据转换异常）
（本文仅供参考） 问题描述 客户数据库日期类型为字符串，格式是20201012；现在直接在模型里面进行参数转换 如图1， 使用仪表盘直接展示转换该字段如图二 正常。 使用模型直接建即席查询则异常提示 查询失败-数据转换异常 image2023-9-11_17-41-25.png image2023-9-11_17-41-39.png image2023-9-11_17-42-16.png image2023-9-11_17-44-55.png 解决方案 该问题是OLAP引擎没有支持”20230911“这样”yyyyMMdd“的日期字符串转日期，可以通过写SQL用函数直接值转换 - 电子表格如何实现值互转如空0转换、空转换为其他字符
>扩展界面，勾选"数据为空时显示为零"即可。此选项只能进行空转换为0. image2015-11-16 17:51:22.png 方法2：可以通过Excel公式IF语句来实现。 具体实现方式参考如下示例： 如下图，我们在D4单元格中输入公式：=IF(C4<>"",C4,0) image2014-10-16 16:18:10.png 则浏览数据效果如下：在原始值为空的都会显示为0。然后我们可以设置"原始值"对应列隐藏。 image2014-10-16 16:18:19.png 方法3：可以通过对电子表格写宏来实现。 可以通过写服务器宏来实现空值转换为其他字符。 转换前查询并准备数据
数据模型”即席查询“，在V11 的202407月最新版本中更名为”可视化SQL查询“。 3 SQL查询 适用于熟悉SQL的技术人员 用户可以通过自定义SQL对数据库中的表、字段进行处理比如：跨表合并数据、转换字段、计算字段等 使用SQL查询过滤数据 使用SQL查询进行权限控制 4 … 1 概述 用户在进行数据分析前，需要先构建数据模型，在数据模型中可以通过各种方式查询并准备数据、并进行必要的数据加工处理，这是创建报表的第一步。 2 查询概览 Smartbi支持可视化创建数据模型，比如选择数据源表、即席查询、自定义SQL查询等 序号 查询类型 适用场景 1自助数据集-定义流程
自助数据集是一类基于个性化需求的数据集，它面向各阶层用户提供数据查询和抽取服务。 用户可以根据业务要求，通过可视化的方式，使用跨数据库、多表关联、数据转换、复杂逻辑关系计算、数据抽取ETL等功能，将数据提取到自助数据集，这些自助数据集允许被自助仪表盘、透视分析和电子表格进行数据分析应用。 自助数据集的定义流程如下： image10.png 新建自助数据集 在系统导航栏中选择 数据准备 ，在数据集的更多images.png中选择 新建>自助数据集 。 xinjianzizhushujuji.png 关于自助数据集的创建入口、资源显示和使用，统一通过V10.5 license控制。如希望在V10.5版本中继续使用自助数据Smartbi V10-数据挖掘
。 +【数据挖掘】评分卡分析新增PSI评估节点 背景介绍 在评分卡分析中，我们经常用到评分信用评级的分箱、数据转换模块、评分卡训练、评分卡预测等功能。支持评分卡模型应用后，还需对模型效果做评估，因此V10版本新增评分卡模型的PSI评估，用于对离散特征稳定性进行评估。 功能简介 V10版本新增PSI评估节点，用于 … 注意：(新特性列表中：+表示新增；^表示增强) 具体改进点如下： 新增 增强 变更 +【数据挖掘】新增自助机器学习，能够快速创建挖掘实验 +【数据挖掘】新增Kafka数据源节点 +【自助ETL/数据挖掘】数据源新增Excel文件 +【自助ETL/数据挖掘】目标源支持GreenPlum功能使用
等。 worddav387155ab8176a7b9014c87d6e26d61aa.png 2.2.3 数据预处理 2.2.3.1 数据清洗 对导入的数据进行清洗，包括处理缺失值、异常值、重复值等。 可以使用Smartbi提供的清洗工具，如数据过滤、数据替换、数据填充等功能。 2.2.3.2 数据转换 根据业务需求，对数据进行转换，如数据类型转换、数据格式转换等。还可以使用计算列、派生列等功能，基于原始数据生成新的数据列。 2.2.4 数据建模 2.2.4.1 创建数据模型 在Smartbi中，可以创建数据模型来组织和管理数据。 数据模型可以包括多个表或视图，并通过表关系（如主键-外键关系）来定义它们之间的联系Kettle的安装
Kettle http://community.pentaho.com/projects/data-integration/ 是"Kettle E.T.T.L. Envirnonment"只取首字母的缩写，这意味着它被设计用来帮助你实现你的 ETTL 需要：抽取、转换、装入和加载数据；翻译成中文名称应该叫水壶，名字的起源正如该项目的主程序员 MATT 在一个论坛里说的哪样：希望把各种数据放到一个壶里然后以一种指定的格式流出。 Spoon 是一个图形用户界面，它允许你运行转换或者任务，其中转换是用 Pan 工具来运行，任务是用 Kitchen 来运行。Pan 是一个数据转换引擎，它可以执行很多功能，例如：从不同的数据源读取、操作创建计算列
1 概述 计算列：添加到数据模型表或查询中的一个新列，对每一行都计算值。 如果当前分析的数据不包含获取期望结果所需的特定字段，可以使用公式或已封装的函数进行数据加工处理，定义新的列。计算列适用场景如下： 数据补充：计算列可以通过基于表中已有的列进行计算，生成新的列来补充数据。例如，可以根据产品的单价和销售数量计算销售额，并将该计算结果存储在计算列中； 数据转换：计算列可以用于将数据格式化或转换为其他形式。例如，可以将日期时间列分解为年、月、日等部分，并存储在计算列中，以便后续按时间进行分析； 数据筛选：计算列可以用于根据特定条件对数据进行筛选和标记。例如，可以创建一个计算列来标记销售额超过某个阈值的产品。 1、计算即席查询-字段设置
到“已选区”。 4、通过“移动按钮”对“已选区”的字段进行排序。 “已选区字段”从上往下的顺序为“表格字段”从左至右的顺序。 字段设置 字段设置用于修改字段的相关属性，包含：别名、数据类型、数据格式、脱敏规则、转换规则、是否隐藏。 设置方法：通过鼠标单击字段属性相对应的单元格进行编辑修改 … 规则 对某些敏感信息通过脱敏规则进行数据的变形，实现敏感隐私数据的可靠保护。 脱敏规则的具体设置请参考 脱敏规则 。 将座机电话号码后八位数字都用“*”替代，如图： image2019-10-23 9:48:4.png 转换规则 把字段数据转换为熟悉的业务术语。 转换规则目前只支持指标管理 ⬝ 创建维表
的表数据 新建维表的表结构后，再实现维表的表数据，Smartbi 有两种方式实现表数据，分别是：在线编辑数据、通过绑定自助ETL实现灌数。 在线编辑数据：在前端以Excel的形式提供在线编辑表数据的功能，适合业务或IT人员实现小批量数据的录入和修改。 绑定自助ETL：通过ETL工具实现数据抽取、转换、加载，适合数据量较大并且对数据转换的要求比较高的情况，同时需要具备一定的ETL工具能力。 3.1 在线编辑数据 1、打开某个维表，点击 数据预览 ，查看维表数据。 数据预览.png 2、点击右侧的 在线编辑 ，打开在线编辑数据的窗口。 由于SQL查询的数据结果，可能是通过SQL语句查询多个表而来，所以无法
