第47页,共595页。 显示 5,949 条结果 (0.092 秒)
如何将数据集数据通过计划任务抽取到临时表中
有这样两类需求,可能需要用到临时表。 1)主要的查询数据在Oracle数据库中,而在查询时需要关联的另外一个表却在SQL Server数据库中,Smartbi http://www.smartbi.com.cn/中查询数据时是没法直接跨库关联的,因此我们需要将SQL Server库中的表抽取到Oracle的一临时表中,便于关联查询。 2)在数据库中有一个超大的上亿条记录的数据表,查询时还需关联多张表,查询效率极低,可能需要几分钟,甚至更长时间。一个可能的解决方案就是,把复杂查询的数据,先定时抽取到一个临时表中,减少数据量,在此基础上再去查询,即可极大地改善查询效率。 上述两种情况,在Smartbi中都可以通过计划任务,将数据如何找SQL看数据不对问题(数据模型)
jdbc驱动跟数据库交互,把SQL送到业务库执行,返回到Smartbi,只不过这个时候,返回数据到OLAP那边,OLAP再进行处理,处理好之后,再展示到前端。大概流程可以看下面这个图。 worddavc39a020333cd36fbfdb1fd168f54d496.png 说那么多,不是搞的比旧数据集还复杂吗 … 。 另一个描述,Segment.load,则是我们需要关注的SQL,那么多条,是因为要分页取数,行数不太一样是因为要查询的条件不一样,这里我们可以先取SQLTupleReader.readTuples最近的一条,复制了之后去数据模型那边的SQL查询选下数据源执行,或者是去JDBC方式连接的数据库工具里跑跑看看数据对不对Oracle --> Vertica 数据类型转换规则
需求:在Vertica数据库上建表,表结构来源于原Oracle数据库,故需要转换成Vertica数据库库表结构。 实际转换操作需要评估源库用到的所有数据类型和数据本身特性。 下面是总结的某场景下的替换规则,仅供参考。 1.时间类型: DATE => TIMESTAMP 2.数字类型: NUMBER( => NUMERIC( NUMBER => NUMERIC(38,0) INTEGER => NUMERIC(38,0) 3.字符类型: VARCHAR2( => VARCHAR( NVARCHAR2( => VARCHAR( CHAR配置 Smartbi 知识库
Smartbi大数据分析 产品在 Windows 安装包中,会自动安装 MySQL 作为知识库以及 tomcat 作为默认的应用服务器。 但是如果在 Linux、Unix 系统上部署 Smartbi,或者在其他应用服务器(如Weblogic,Websphere)上部署,或者是不希望使用 MySQL 而使用其他数据库做知识库,都会需要手工配置知识库。 1、新配置的知识库,必须使用空库。 2、对数据库拥有管理的权限,以保持后续系统运行过程中对知识库的表的增删改查有相关操作权限。达梦7以上作为知识库报错:表[t_operationlog]中不能同时包含聚集KEY和大字段
共存,需要修改达梦数据库的配置文件,将默认主键创建为普通主键,即非聚集,修改./data/数据库实例/dm.ini中的参数PK_WITH_CLUSTER改为0即可。修改配置后需要重启达梦数据库的相关服务。 … (本文档仅供参考) 问题现象 以达梦7作为知识库,这时候空库部署启动的时候,会抛出如下错误: [2019-06-10 18:13:54] [INFO] [System.out] [06-10 18:13:54 INFO doUpgradeExcel数据导入模版如何放到仪表盘页面上
( 本文档仅供参考) 我们在定制管理 ->数据管理-> Excel数据导入界面上定制的导入模版,如何放到仪表盘页面上呢,让用户在浏览仪表盘的时候,也可以选择本地Excel文件数据导入到后台数据库。我们通过发布主题发布后,没办法直接浏览到创建的excel文件数据导入模板,但是可以通过定制Web链接引用Excel导入 … image2016-7-7 20:13:52.png 3、接着到"定制管理 -> 运维和管理->发布电脑主题"界面上,将web链接发布。 image2016-7-7 20:22:10.png 4、我们到仪表盘界面上,打开对应的页面就可以看到,用户可以直接"浏览"选择本地的Excel数据文件,然后"导入"到后台数据库中ETL-源库SQL脚本基于Oracle查询执行失败
(文档仅供参考) 问题现象: 客户V10.5.15版本,自助ETL中源库SQL脚本执行失败,请问如何解决? 备注:用原生SQL数据集能正常查询 image2023-7-31_16-24-37.png 问题分析: image2023-7-31_16-25-2.png 解决方案: 1.保证smartbi服务器和挖掘引擎都可以访问连接该数据库; 2.去掉数据源JDBC URL后面的 includeSynonyms=false后连接正常。 image2023-7-31_16-27-57.png连接Kerberos认证的Impala数据源
1 概述 本文介绍如何连接带kerberos认证Impala数据库。 2 数据连接 2.1 环境准备 ① 找到服务器路径下的hosts文件: Windows环境路径:C:\Windows\System32\drivers\etc\hosts image2021-8-10_15-31-2.png … IMPALA,需要下载db.properties文件,并上传到目录 将以上依赖jar包和db.properties文件放置目录下,30秒内Smartbi可自动加载,无需重启服务器。 image2022-8-23_11-27-18.png 2.4 连接步骤 ① 在数据连接的关系数据库中,选择新建Impala数据信创版本数据连接支持情况-汇总
备注: 支持存储过程:存储过程只支持单个输出参数,而且OUT参数只支持游标类型。 选项中是“-”、,代表它不支持。 更多其他关系数据源可查看:数据连接支持情况-汇总 https://wiki.smartbi.com.cn/pages/viewpage.action?pageId=142969310。。 序号 数据库 数据源 数据模型 指标模型 自助ETL 数据模型引擎V2.0 电子表格 备注 内置驱动 支持导入文件 支持多catalog 支持存储过程 支持导入文件 支持生成日期表 支持分区 作为指标库 关系数据源(读) 关系表(追加) 关系表(覆盖) 关系表(插入或更新Smartbi Olap Server 兼容的业务库类型
Smartbi Olap Server(数据模型引擎)目前支持的业务库类型如下: 数据模型支持使用以下业务库类型建立 业务库列表 是否支持 关系数据库 ALIYUN_ANALYTIC_DB 是 ALIYUN_MAX_COMPUTE 是 Clickhouse … TimesTen 是 Vertica 是 星环 是 NoSQL数据库 Smartbi JDBC for MongoDB 是 高速缓存库 Presto+Hive 是