第74页,共225页。 显示 2,250 条结果 (0.127 秒)
数据挖掘-派生列
概述 派生列节点是用于在数据集中生成可行的新特征字段。它可对现有数据的某个特征操作,允许用户自定义生成特征名称,并将生成的新特征字段添加到原数据集中。 image2020-6-1 16:1:12.png 派生列的编程语法是Spark SQL,具体可参考 Spark SQL 内置函数 http://spark.apache.org/docs/latest/api/sql/index.html。 输入/输出 输入 一个输入端口,用于接收数据集。 输出 一个输出端口,用于输出派生列的结果。 参数设置 设置派生列的参数: image2020-6-1 16:2数据挖掘-派生列
概述 派生列节点是用于在数据集中生成可行的新特征字段。它可对现有数据的某个特征操作,允许用户自定义生成特征名称,并将生成的新特征字段添加到原数据集中。 image2020-6-1 16:1:12.png 派生列的编程语法是Spark SQL,具体可参考 Spark SQL 内置函数 http://spark.apache.org/docs/latest/api/sql/index.html。 输入/输出 输入 一个输入端口,用于接收数据集。 输出 一个输出端口,用于输出派生列的结果。 参数设置 设置派生列的参数: image2020-6-1 16:2Smartbi V10.5.15-数据准备
注意:(新特性列表中:+表示新增;^表示增强) V10.5.15版本重点对"加载文件数据"功能进行了优化和完善,详细改进情况如下: 新增 增强 +【指标管理】支持接入已有的维表和事实表 +【指标管理】维表和事实表支持基于SQL创建 +【指标管理】支持PostgreSQL数据库作为指标存储 … 。 2023-03-30_13-58-17.gif 参考文档 详情请参见:添加数据库的表。 +【指标管理】维表和事实表支持基于SQL创建 功能简介 在V10.5.15版本中,若数据库中没有现成的维表、事实表,但可以通过SQL语句输出期望的维表、事实表结构时,可通过指标模型的添加SQL查询功能来创建维表和事实表202312产品更新说明
进行目录新建、名称修改、移动、隐藏操作。 ETL-06.png + SQL函数支持通过EXCEL导入方式增加 Spark SQL函数列表增加EXCEL导入功能,方便用户进行维护,如果需要进一步丰富内置Spark SQL函数,可以通过此方法补充更多Spark SQL函数。 ETL-07.png 3.5 … 。 根据度量筛选器筛选后的结果计算合计值。 交叉表、透视分析支持SQL引擎,详见:SQL引擎V1.0介绍。 jiaoichabiao-01.png ^ 图形组件功能增强 对交互式仪表盘的图形组件功能进行系列优化调整,实现更丰富的图形效果,主要优化的内容如下: 图形组件支持使用命名集字段仪表盘版本打开查询失败报错:Databaseconnect timeout of 30 seconds reached
不到这个业务数据库,或者olap访问业务数据库较长超出限制导致; 另,经分析日志这里还不是执行sql,只是连接数据库,一般连接不需要30秒的,建议先去看看是不是OLAP和业务库没有网络互通,但如果真要长时间, 则到系统监控-切到OLAP服务-系统配置-高级设置,增加或修改olap的配置参数:mondrian.rolap.connectTimeout=60【这里单位:秒,不需要重启】。 image2024-12-23_9-28-5.png 注:此处只是OLAP连接业务库,若确实连接都这么长时间的话,建议还是看看OLAP服务和业务数据库服务直接的网络问题,看是不是网速慢,不然后面执行复杂SQL耗时会更久。数据集抽取
,如图: image2020-3-10 15:17:11.png 日志查看 用于显示抽取日志。若抽取失败,可以获取错误日志来检查错误原因。 image2019-8-21 16:42:29.png数据集抽取
,如图: image2020-3-10 15:17:11.png 日志查看 用于显示抽取日志。若抽取失败,可以获取错误日志来检查错误原因。 image2019-8-21 16:42:29.png使用多维分析实现了参数联动以及参数多选后,下级参数带有上级参数的数据
: image2020-6-2 16:54:20.png 那么如何去掉下级参数中带有的上级参数的数据? 解决方案 此问题是由于下级参数(错误名称)的MDX语法有误导致,参照 多维分析实现参数联动 https://wiki.smartbi.com.cn/pages/viewpage.action?pageId=44499404 实现的效果只适用于单选参数,并不适用于多选参数,参数联动的MDX语法,如下图所示: image2020-6-2 17:8:18.png 查询数据显示的效果如下图所示: image2020-6-2 17:11:0.png 如需实现结合多维参数联动功能以及多维参数多选功能,需要将下级参数(错误名称日志中出现findFailedInstances警告的处理方式
错误现象 当日志中出现形如 03-04 10:10:39 WARN findFailedInstances(org.quartz.impl.jdbcjobstore.JobStoreTX:3298) - This scheduler instance (SMARTBI_I000000005f0c1fed014bdf0c4d030005_) is still active but was recovered by another instance in the cluster. This may cause inconsistent behavior. 警告时,计划任务模块可能不能正常工作。 错误原因 这个警告的原因是自助ETL预览窗口取数逻辑
(文档仅供参考) 问题说明 为什么etl预览窗口很快,而数据查询 查询就很慢 image2023-12-11_18-27-55.png 数据查询—sql查询 image2023-12-11_18-26-34.png 原因: etl窗口预览取数逻辑: 1、预览数据在 引擎安装目录\data\middata 目录下以csv格式存储; 2、预览数据存储多少行数据成CSV文件,由如下配置决定; image2023-12-11_18-28-52.png 而数据查询节点查询:其对应sql查询模块的查询,对应有count全表,当全表数据量较大时,sql则较慢,对应和数据库性能相关。 注:如涉及到慢的情况,如多方面因素