第332页,共497页。 显示 4,964 条结果 (0.921 秒)
作业流监控
: image2021-5-14_10-38-53.png 该界面设置详情请参见 新建计划 https://wiki.smartbi.com.cn/pages/viewpage.action?pageId=47486842 。 作业调用记录 用于显示当前作业流的调用记录信息。 image2021-5-14_10-40-17.png 该记录中如何在作业流中调度数据挖掘实验?
1 概述 数据挖掘实施项目中,需要在新数据产生和读入时,把数据用到建模和重新训练模型。目前依赖实施人员人工检查数据情况,发现新数据时手动执行挖掘实验,所以需要支持在作业流中对挖掘实验进行编排调度。 在Smartbi V10.5.12 版本,作业流中已经可以支持拖入数据挖掘资源,并通过计划任务定时调度。 2 示例 通过作业流直接调度数据挖掘实验,新建作业流,在作业流中增加需要调度的挖掘实验,如下图: 1、添加开始节点 拖入开始节点:运行作业流必须要以该节点作为起始节点 2、添加挖掘实验节点 拖入银行客户流失预测节点:示例中需要调度的挖掘实验 image2023-12-5_20-41-8.png 3SQL查询 的order by不起作用
:19.png 或者使用原生SQL查询制作报表,原生SQL查询是直接将SQL语句通过jdbc驱动发送给数据库,不做二次处理。 关于各类查询的介绍可参考wiki文档:数据集定义 https://history.wiki.smartbi.com.cn/pagesSQL数据集中定义的字段数与输出字段中的字段数不一致
https://blog.csdn.net/itmyhome1990/article/details/106849914 ,所以当数据库是Oracle 10g之后的,是可以按照中文的逗号分隔字段的,因此在数据库中执行SQL语句,字段数输出正常。 而在Smartbi产品中,对SQL数据集进行解析时,是用的英文原生SQL查询的输出字段为什么显示成了问号
(本文档仅供参考) 问题 新建的原生SQL查询,在右侧"查询输出"面板上"输出字段"下的字段显示成了问号,为什么呢? 排查步骤 1. 如下图所示,新建一个"原生SQL查询",我们可以看到右侧的"查询输出"面板上"输出字段"下并没有把所有的字段列出来,而是显示成了一个问号。同时在"预览数据"时,看到的表格上也只有一列,列名也是问号。 207.png 206.png 2. 为什么呢?我们在SQL编辑器中可能会输入复杂的SQL语句,Smartbi自身是无法解析SQL语句并自动判断有哪些输出字段的。它只能利用数据库的功能,先去执行该SQL语句,根据数据库返回的结果集来判断有哪些输出字段。因此,我们需要在"输出字段"节点上点常见问题
一、租户能承载多少用户 每个租户的默认配置可以支撑<100用户。如需支撑更多用户,联系管理员扩容硬件配置,或搭建集群。 二、性能问题 租户启动之初,各组件都没有预热,所以性能会有些慢。需要打开几张报表,让数据库、olap运行起来,速度才会正常。 三、容器默认硬件配置 V11的每个租户是由5个容器组成的容器组,包含tomcat/mysql/olap/mpp/engine,每个容器分配的cpu是0.05--2核,内存是512M-8G。 需要扩大配置时找平台管理员。 四、504错误 当查询缓慢时,可能会出现504错误,因为使用了nginx做反向代理,smartbi长时间不返回结果,nginx会报504错误。可以联系平台Clickhouse对于小于1970年1月1日时间显示异常
(本文档仅供参考) 问题 现象1:Excel文件导入到Smartbi高速缓存库中,导入的“生日”列的数据,如果其值小于 1970-1-1,导入数据库后,全部变成了 2106-02-07 06:28:16: image2020-7-7 17:16:55.png 导入后显示如下截图: image2020-7-7 17:18:29.png 现象2:数据集中展示有日期,但是日期是小于1970-01-01的,抽取之后日期字段为空了。 原始数据集记录: 抽取为空1.png 抽取之后高速缓存库记录: 抽取为空2.png 解决方案 经查找相关文档确认,clickhouse中1970-01-01在clickhouse数据挖掘-PYTHON脚本
随着大数据时代的到来,Python已经在数据处理、数据可视化、机器学习等领域受到广泛应用。本文将介绍如何在smartbi中编写Python脚本,利用其丰富的科学计算扩展库,满足更多数据处理和分析场景,提高生产效率。 功能概述 Python脚本功能,支持用户编写Python代码,以便实现更自由、更高效的数据处理、数据分析操作,丰富了数据建模过程。 操作说明 (1)功能入口 从左侧资源树的 脚本模块 拖拽出“Python脚本” 节点到画布中。 入口.png (2)数据输入 用户可根据实际情况,对“Python脚本” 使用1~3个输入口(dataframe1~3)来获取数据,然后在Python脚本中按需修改dataframeMongoDB数据源测试连接报错network error while attempting to run command 'whatsmyuri'
。MongoDB客户端需放在对应路径下才可行【linux:部署相对路径下 ./tomcat/bin/mongo-smartbi/mongo】。计划任务通过指标预警发送邮件
场景说明 数据需要每天晚上12点增量更新,希望每天早上6点钟检查数据是否异常,以便及时对异常数据做处理。 实现步骤 1、新建任务,任务类型选择【定制】。 自定义设置如下图: 自定义脚本见指标预警发送邮件.txt 15.png 2、新建计划。 16.png 在待执行任务选择 选择任务 ,选择步骤1创建的任务。 17.png 间隔类型选择每天,触发时间为早上6:00,启用此计划,其余设置默认即可。 3、则每天早上六点,会自动触发任务,当指标预警时,发送邮件。 18.png 19.png 注意事项 1、需要在系统选项,进行发送人的相关设置。 20.png 2、Smartbi服务器需要可以连接指定