第25页,共87页。 显示 868 条结果 (0.023 秒)
【升级注意事项】V9.7➜V10.5
://wiki.smartbi.com.cn/pages/viewpage.action?pageId=55840890 以便在数据模型中使用“ETL高级查询”功能。 2.2 高速缓存库 数据模型依赖于高速缓存库,若高速缓存库使用的是SmartbiMPP,则需要将 SmartbiMpp 更新至 21.x及以上版本 … 将“联机帮助”更名为“帮助文档”。 新增“帮助”入口,并将“帮助文档”放置在“帮助”入口下,同时新增“问题反馈”与“我的反馈”功能。 注意:若曾对【联机帮助】进行过定制处理,依旧存在该入口。 ETL V9.7 ETL界面布局方式为竖版: 00000.png V10.5 ETL界面布局Smartbi V10.5-数据准备
+【数据模型】支持自动创建“日期表”,实现时间层次的标准化定义 +【自助ETL】新增源库SQL脚本节点 +【作业流】新增检查依赖节点 ^【数据模型】实现模型参数复制,快速复用模型公共参数 ^【数据模型】增加表关系自动检测 ^【数据模型】抽取支持建模和数据抽取独立执行 ^【数据模型】表关系区支持子布局视图 … /viewpage.action?pageId=83704012。 +【自助ETL】新增源库SQL脚本节点 背景介绍 自助ETL运行之后的数据会存在Spark中,但是在实际项目业务中,通常会出现以下场景: 场景1:想要直接连接源库不经过sprak执行sql语句,比如对数据进行增删改; 场景2:有时候客户想在数据模型-私有查询
数据模型中的模型表来源于:数据源表、导入文件、SQL查询、即席查询、Java查询、脚本查询、存储过程查询、ETL高级查询、生成日期表。 这些类型的私有查询作为数据模型的基础元素,只能被其所属的数据模型使用,私有查询的数据结果可以通过数据预览 https://wiki.smartbi.com.cn/pages … ?pageId=69737262、存储过程查询 https://wiki.smartbi.com.cn//pages/viewpage.action?pageId=69737193、ETL高级查询 https://wiki.smartbi.com.cn//pages/viewpage.action?pageId安全加固手册
功能限制,如自定义计划任务、自助ETL、原生SQL等给用户很大灵活空间的功能同样会带来操作风险 功能包含敏感信息或开放风险较高 各版本都可支持操作权限加固设置,具体设置可参考wiki文档:操作权限管理 系统攻击防御 安全漏洞、界面暴力破解、IP地址伪造 已存在的安全漏洞没有更新安全补丁、登录 … 计划任务、自助ETL、原生SQL等给用户很大灵活空间的功能同样会带来操作风险 功能包含敏感信息或开放风险较高 各版本都可支持操作权限加固设置,具体设置可参考wiki文档:操作权限管理 系统攻击防御 安全漏洞、界面暴力破解、IP地址伪造 已存在的安全漏洞没有更新安全补丁、登录界面或配置界面高速缓存库集群支持说明
(本文档仅供参考) 问题 请问目前的mpp能不能集群部署,有什么注意事项? 解决方案 基于V8版本,Smarbti高速缓存功能说明: Vertica、星环、Presto+Hive:可以支持对应的数据库集群环境; infobright(社区版):社区版不支持集群部署,当前Smartbi产品默认自带的infobright为社区版; infobright(企业版):可以支持对应的数据库集群环境; SmartbiMPP:只支持对应的数据库集群环境的查询,不支持抽取到对应的数据库集群环境(现在Smartbi的抽数功能,对SmartbiMPP的集群还有功能缺陷,只能把数据抽到一个节点上;如通过ETL工具把数据抽取Smartbi V10.5.12-数据挖掘
的帮助信息后面添加创建节点使用示例的入口,针对常用的数据预处理节点和统计分析节点支持一键生成示例,帮助用户快速了解节点的使用方法。 功能简介 用户在鼠标移动到某一个节点之后,出现悬浮提示后会出现“生成示例”链接“,点击之后会在新窗口中生成对应的示例ETL。 image2023-1-15_0-21-35.png … 。 +【挖掘】增加正则表达式处理节点 背景介绍 在处理文本过程中,经常会使用正则表达式去处理,目前ETL正则处理文本功能较弱,多个ETL项目中均有实施人员提到希望增强该功能。 功能简介 用正则表达式语法的强大模式匹配能力,对字符串数据进行解析、匹配或替换。 image2023-1-15_1-1-2.png 参考安装介质说明
smartbi-mpp-22.8.9.24_x86-64.tar.gz 数据挖掘/ETL SmartbiMiningEngine 所有cpu架构都适用 SmartbiMiningEngine-V11.0.tar.gz python节点 Python aarch64/arm python-3.9.13_aarch64.tar.gz资源默认Tab页方式打开
1.需求背景 很多老客户都习惯V10的使用方式:双击打开资源,默认以Tab页方式打开。 2.功能说明 使用该扩展包后,“分析展现”、“数据准备”中,“资源”默认“Tab页”方式打开。 生效说明 分析展现:即席查询、透视分析 、交互式仪表盘 、Web电子表格、Excel导入模板 数据准备:数据模型、自助ETL 3.使用说明 3.1. 扩展包部署 扩展包:ReportOpenFormExt.ext https://my.smartbi.com.cn/addons/leescore/goods/details.html?gid=126 部署说明:扩展包部署 https://wiki.smartbi.com.cn数据模型错误用法
的数据是否应当被删除或替换为有效的数据。比如,如果产品编号4实际上是一个已停产的产品,考虑将其标记为"停售"状态而不是直接删除,以便保留历史销售数据的完整性。 2、 利用ETL进行数据清洗 数据处理:通过ETL对数据进行清洗。在数据加载到分析环境之前,先对其进行一系列的转换操作,如填充缺失值、标准化数据格式等。 提升数据质量:ETL工具可以帮助我们自动检测并处理那些不完整或不一致的数据,确保最终展示给用户的是一份高质量的数据集。 踩坑四:关系有多义性 关系的多义性,是指当一张表触达另外一张表有多个路径。在多个事实表同时共享两个不同维度时,开启了双向筛选,会形成环路,也就是多个路径可选择,系统无法自动选择查询路径。 如下Hadoop-hive数据连接
1 概述 Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。 Hive是建立在 Hadoop 上的数据仓库基础构架。它提供了一系列的工具,可以用来进行数据提取转化加载(ETL),这是一种可以存储、查询和分析存储在 Hadoop 中的大规模数据的机制。 本文介绍如何在smartbi V9.5以上版本中连接Hadoop-hive数据库。 2 数据连接 2.1 配置信息 驱动程序类 连接字符串 驱动程序存放目录 支持数据库版本