第5页,共25页。 显示 249 条结果 (0.089 秒)
数据抽取
的“DEFAULT”节点下生成对应的视图和字段: 80.png 再次查询当前数据集或分析的数据时,从高速缓存库获取数据。 数据集有参数情况下,抽取之后基于该数据集创建的资源不会走mpp。 数据集没有参数的情况下,数据集抽取之后基于此创建的资源会走mpp,然后抽取之后的数据集预览的时候是实时查询不走mpp … ”,抽取后表数据追加,仍按年分区。 2、如果mpp是单机部署的,则无论是否有设置分区字段,都默认使用Log引擎创建表;如果mpp是集群部署的,则选择分区字段后,将使用MergeTree引擎创建表。 异常处理 回滚 表示返回到数据抽取前的状态。 继续 表示继续抽取下一条数据,并将这条错误数据计算字段名称不支持中文
(本文档仅供参考) 问题说明 在新增计算字段界面,发现名称不能为中文,出现提示“计算字段名称不合法。只能含有字母、数字或下划线且不以数字开头。” image2019-11-29 16:9:53.png 解决方案 功能说明:目前计算字段之所以不允许名称含中文,是因为考虑到这个名称可用于mpp抽数时的列名,而中文列名抽取时可能会报错,同时规范后的名称也比较有利于后续得扩展与运维。 建议:建议在编辑计算字段的时候,在【别名】一栏中输入中文。 名称不支持中文 不支持中文 计算字段名称Smartbi⬝ 安装介质说明
型MPP(SmartbiMpp等) 性能最佳(高性能) 部署简单方便 建议用于生产环境、关注性能的测试环境 安装包15G左右 Linux环境 1、安装包包含了数据挖掘的相关镜像,默认不安装,可以参考Wiki文档进行安装部署。 2、使用永久正式的License,需要配合License Server一起使用。 3 … 用MPP,通过MPP安装介质直接安装。 3、如果要使用Mining,通过安装介质直接安装。 4、安装介质请联系smartbi官方支持获取下载地址。 手工部署Smartbi各组件 https://wiki.smartbi.com.cn/pages/viewpage.action?pageId=114987824部署smartbiMPP集群多副本集群
SmartbiMPP 高速缓存库,列式数据库管理系统,用于指标库和数据抽取功能。 SmartbiMPP支持 22.3及以上版本,低于该版本则需自行更新。更新方法可参考文档MPP更新 安装包请联系Smartbi官方支持获取。 本文档主要说明2个节点如何部署多副本集群 1. 系统环境准备 1.1 集群系统环境 … mpp使用到的相关端口。 1.2.1 关闭防火墙 临时关闭防火墙(立即生效) systemctl stop firewalld 永久关闭防火墙(重启后生效) systemctl disable firewalld 查看防火墙状态 systemctl status firewalld 1.2.2 开启防火墙Clickhouse-使用中文表名和字段名在ClickHouse高速缓存库中建表报Missing columns
(本文仅供参考) 问题描述: 客户很常使用中文表名和字段名在ClickHouse高速缓存库中建表,时常出现Missing columns的错误, image2025-4-25_15-21-18.png 解决方案: 我们分析SQL并不存在问题,发现ClickHouse对非ASCII字符的兼容性不好,将中文替换成英文字符可以正常执行。 我们发现ClickHouse 22.8之后的版本对中文兼容更友好了,可以解决之前遇到的问题。旧版本出现该问题时候,可以考虑升级Clickhouse 升级详见以下wiki:升级SmartbiMPP mpp建表报错Clickhouse-抽取报错日志中包含Cannot open file或者文件不存在之类的报错
(本文档仅供参考) 问题描述: 客户在抽取时提示抽取异常,后台日志提示:cannot open file /var/bib/clichhouse/metadata/smartbimpp/icyxlcnae6ik0mp37ufniq_temp.sql.tem image2025-4-25_15-19-38.png 解决方案: 抽取报错日志中包含Cannot open file或者文件不存在之类的报错,看日志是create table的时候发生了异常,这种是一般是MPP文件损坏了,我们可以尝试先把对应路径下的文件备份到其他路径,然后删掉损坏的文件。 抽取不能打开文件准备Smartbi及其组件安装包
,包含:Smartbi、知识库、数据挖掘实验服务、MPP、olap服务和导出引擎组件 高性能完整版 Smartbi_All.tar.gz 高性能版本安装包,包含Smartbi的所有组件。 安装包部署 名称 软件包文件 说明 Smartbi smartbi.war Smartbi主程序 Smartbi-MPP clickhouse-client_21.6.6.51_all.rpm clickhouse-server_21.6.6.51_all.rpm clickhouse-common-static_21.6.6.51.rpm 高速缓存库clickhouse使用<>(不等于)时null也被排除在外
(此文档仅供参考) 问题描述: 以透视分析为例,在使用clickhouse的mpp进行查询时,直接拖拽字段作为参数,参数设置过滤掉不等于某个类型也会把NULL给过滤掉,该如何解决呢? image2024-11-1_13-52-45.pngimage2024-11-1_13-53-24.png 问题原理 … 【or】 image2024-11-1_14-4-46.pngimage2024-11-1_14-10-11.png 对应执行SQL: image2024-11-1_14-0-55.png ch空值处理 mpp的null不显示【升级实操】V9.5➜V10.1
Smartbi-OLAP-Server OLAP Server部署方案请参考:Window部署、linux部署 高速缓存库 √ √ 必须部署组件 V10.1 不支持Infobright,需要更换为SmartbiMPP。 Linux环境下,部署方案请参考: 部署Smartbi-MPP高速缓存库 … 高速缓存库的请参考文档 部署Smartbi-MPP高速缓存库。 ② 更新MPP SmartbiMPP支持 21.x及以上版本,若低于该版本则需进行更新 更新SmartbiMPP请参考文档 升级SmartbiMPP。 ③ 切换高速缓存库 使用管理员初次访问升级后的 V10.1 环境,系统会进行自检,当检测到当前ETL高级查询-演示示例
ETL高级查询工作流 ETL高级查询工作流必须以数据源为起点,以输出到MPP为终点:从数据源中抽取需要进行处理的数据,通过拖拽内置的预处理方法,之后再将处理过的数据存储到目标源中。 image2019-8-6 10_54_55 (1).png 定义ETL高级查询 新建ETL高级查询 数据基础 数据源中 … 1、连接派生列节点和输出到MPP节点,并运行节点。 image2022-2-16_11-54-13.png 2、在”输出到MPP“节点右键菜单选择 查看输出,底部数据预览区展开,可以查看“销售额取整”字段的数据预处理结果,如图: image2022-2-16_12-1-14.png 3、新建高级ETL查询完成