第21页,共566页。 显示 5,660 条结果 (0.036 秒)
查询预览报错:数据库执行sql偶现报Broken pipe或提示查询超时
(此文档仅供参考) 问题说明 星环数据库执行SQL偶尔会报以下错误: java.net.SocketException: Broken pipe (Write failed … (TIOStreamTransport.java:145) ... 70 more 解决方案 此报错是由于数据库服务器端会定时断开连接,而数据源设置"获取连接时测试"、"返还时测试"、"获取、返还连接时测试"方式,并没有设置校验语句导致,关于连接池、校验方式、校验语句的逻辑如下: (1)当设置校验方式为2、数据挖掘spark计算节点集群
部署spark计算节点 1、数据挖掘数据量2000万、15个并发任务时以下时,只需要提升数据挖掘服务器配置即可。 2、数据量和并发数超出时,可部署多个计算节点,执行引擎会将计算任务调度到部署的计算节点。 3、计算节点和执行引擎是主从架构,执行引擎是主节点,计算节点是从节点。 1、基础环境准备 参考0、系统环境配置 文档,完成操作系统的基础配置 1.2 启动挖掘计算节点 1、解压Smartbi-engine安装包到指定的安装目录 tar -zxvf SmartbiMiningEngine-V11.0.tar.gz -C /data 2、登陆smartbi服务器,打开运维设置–数据挖掘配置–引擎设置,复制Spark代理器准备数据
概述 本文旨在指导AIChat用户,使用产品相关功能模块,以最小投入,快速搭建满足应用场景的数据模型,作为AIChat问答的基础。 应用场景 某公司想从时间、合同、销售、地区这几个维度分析公司历年来的签约情况,包括合同金额、合同个数。 模型制作 我们将从需求分析、数据准备、创建数据模型这 3 个方面进行实操演练,最终实现快速搭建数据模型,模型需搭建标准星型模型。 1 需求分析 这一步我们的目的有两个:确定分析维度和分析度量。从应用场景描述我们可以得知,用户需要对签约合同这个业务发生的结果进行分析,分析维度和分析度量包括: 分析维度:日期维、合同维、销售维、地理维。 分析度量:合同金额、合同个数。 2自助数据集-数据来源
系统支持自助数据集的数据来源有两个: 1. 支持基于“关系数据源、高速缓存库”创建。 支持基于创建.png 注: 1)上图的“数据连接”区中,灰色状态的数据源,表示该数据源不支持应用于自助数据集。 2)上图的“数据连接”区中,彩色长条上的小圆表示image2023-10-10_17-13-52.png:该数据源支持跨数据源定义自助数据集。 自助数据集支持跨库查询,其中,kingbase、神通、达梦6、达梦7暂不支持跨库。 “kingbase、达梦”暂不支持group by一个blob字段。 2. 支持引用其它数据集 系统支持引用的其他数据集有:SQL数据集、原生SQL数据集、可视化数据集、存储过程数据集、JAVA新建数据库网关
,请参考如下操作步骤。 1、在 Smartbi 主界面右上角点击“... 查看更多”按钮。然后在弹出的下拉菜单中,点击“数据库网关”菜单项。 image2025-3-29_9-8-25.png 2、在“数据库网关”对话框上,点击“添加数据库网关”按钮,新建一个网关后,然后点击“下载网关令牌”。该令牌文件,在运行网关代理时需要使用它。 image2025-3-29_9-11-9.png 3、注意对话框底部的提醒。数据库网关连接本地数据库时,默认启用SSL(Secure Sockets Layer),数据库不支持SSL会出现连接错误。如果确定不支持或不想启用SSL,请在“连接字符串”中配置参数禁用它。数据挖掘-数据的输入和输出
在数据挖掘的流程中,数据的输入和输出也是必不可少的。 因为需要导入数据才可以进行后续的数据预处理、分析、建模等;以及将最后的结果数据,导出保存在指定的目标库。 所以Smartbi分别提供数据源和目标源节点,满足数据的输入和输出。 数据源 Smartbi提供了几种数据源用于数据输入,分别是文本数据源、Kafka数据源、关系数据源、示例数据源、数据集、数据查询和Excel文件。 文本数据源 概述 文本数据源是指将HDFS读取的csv等数据文件导入到Smartbi中。 image2020-6-4 16:44:2.png 输入/输出 输入 没有输入端口。 输出 只有一个输出端口,用于业务主题数据权限
针对 业务主题 对应的关系数据源创建的数据权限。在关系数据源中通过对查询的目标表设置数据权限,当即席查询和可视化数据集中涉及到这个业务主题的这些表时,数据权限设置条件会自动启用。 业务主题数据权限的设置和使用和关系数据源的数据权限设置逻辑一致,具体请参考 关系数据源的数据权限 。 操作入口 在“系统导航栏”选择 数据准备,在 “数据准备” 界面下选择相应的业务主题,在其更多操作0.jpg中,选择 设置数据权限,则进入数据权限设置窗口。 image2022-2-22_19-8-5.png 右键选择需要设置数据权限的表,在弹出的下拉框中选择 设置。接着”点击 添加 按钮,添加一条表的数据权限Vastbase数据连接
1 概述 Vastbase 数据库,也称海量数据库,是海量数据基于华为openGauss内核,融合多年对各行业应用场景的深入理解,携多年数据库开发积累,倾力打造的企业级关系型数据库。 本文介绍如何在Smartbi中连接 Vastbase 数据库,当前支持 Vastbase G100 的 PG模式 和 Oracel模式。 以下功能,Smartbi暂不支持: 1、暂不支持物化视图。 2、暂不支持存储过程。 2 数据连接 2.1 配置信息 版本信息如下: 驱动程序类 连接字符串 驱动程序存放目录 支持数据库版本 cn.com.vastbase.Driver PG模式数据挖掘-行转列/列转行
概述 将数据表中的行转换成列或将列转换成行。 行转列 {html}<div style="border-bottom: 0.5px solid #dfe1e5;color:#2D5C8C;padding-bottom: 0.5px;font-size: 24px; height: 5px;"> </div>{html} 概述 行转列是用于实现将数据结果的行转换成列。 image2020-6-1 17:57:59.png 输入/输出 输入 一个输入端口,用于接收数据集。 输出 一个输出端口,用于输出行转列的结果。 参数设置 设置行转列的参数presto+hive高速缓存库数据库管理添加数据源报错
(本文档仅供参考) 问题 使用高速缓存库添加数据源的时候报错。 解决方案 1、此时需要排查是否对应数据源的驱动添加到了presto目录了 2、如将hive中对应的驱动放置高速缓存库的presto目录下即可 3、路径如下: image2021-11-21_15-42-7.png presto+hive高速缓存库添加表报错