第21页,共87页。 显示 865 条结果 (0.148 秒)
数据模型-前端接口说明
) => { // 屏蔽数据源表、日期维表 iViewEntryImpl.hideMenus(['BASIC_TABLE', 'TIME_TABLE']); /* TIME_TABLE、ETL_VIEW、PROC_VIEW、JS_VIEW、JAVA_VIEW、COMBINEDQUERY_VIEW、SQL_VIEW、EXCEL_VIEW、BASIC_TABLE,分别代表:生成日期表、ETL高级查询、存储过程查询、脚本查询、Java查询、即席查询、SQL查询、导入文件、数据源表 */ }) ``` ### AUGMENTEDDATASET_ON_VIEW_ADD **触发时机**:添加私有查询后,处理字段时 **作用**:添加私有SmartBI线下excle异构数据源数据源报表开发实现路径
(本文档仅供参考) 需求: 场景举例:目前数据模型有一个复杂SQL查询(带参数),需要关联一张线下EXCEL表,创建自助分析模型,给到用户即席or透视or仪表盘。 痛点: 1、模型处理异构表关联需要走抽取,抽取存在只能抽取参数默认值,故该方法不通 2、线下数据落到数仓,需要评估是否合规 3、自助ETL处理异构,流程比较复杂 解决方案: 目前在产品当中,要使用本地的Excel文件数据做分析, 1、通过文件数据源将数据导入到指定的数据库 2、通过ETL当中的功能将数据落地到数仓,然后Smartbi再通过数据模型进行处理 除此方法外,将本地Excel的数据导入到hive库当中,然后直连hive库中是数据表查数分节点数据展示为科学计数法
(本文档仅供参考) 问题描述 数据库数据存储如下 image2024-10-30_19-15-26.png etl执行之后,对应数据呈现变成了科学计数法,并且落地数据失败。 image2024-10-30_19-16-9.png 原因 展示为科学计数法是因为spark针对比较大的double或者 … 要求。 image2024-10-30_19-23-26.png etl科学计数法网络请求安全卫士
别 主要指后台管理、系统管理类的接口,如系统监控、系统运维等接口。 编辑类别 主要指新建/编辑系统各种资源,如数据模型、ETL 资源、报表等的接口,或者说非系统管理类功能的编辑接口。 浏览类别 主要指报表浏览相关接口。 无 全部接口都不放行,拦截所有接口。 安全风险等级说明: 产品中提供代码编写和修改业务数据功能的高级模块,如定制任务、ETL 中的python节点、javascript查询等,由于操作灵活性较高,其相关接口均被归类为 高危类别。 具体使用说明如下: (5-1)不受限制的 IP 允许配置受信任的 IP 地址范围,来自这些地址的请求将跳过安全卫士操作权限列表
指标模型中是否有新建事实表的权限。 模型管理 用于控制在指标模型中是否有模型管理的权限。 全局视图 用于控制在指标模型中是否有全局视图的权限。 作业流 用于控制是否拥有新建作业流的权限。 ETL自动化 用于控制是否拥有ETL自动化操作的权限。 自助ETL 自助ETL 用于控制是否拥有新建自助ETL的权限。 导入导出流程定义 用于控制在自助ETL中是否拥有“导入导出流程定义”的按钮权限。 源库SQL脚本 用于控制在自助ETL中是否拥有“源库SQL脚本”节点的权限。 Python脚本 用于控制在自助ETL中是否拥有“Python脚本”节点的权限循环分页取数
3.1 新建etl 新建一个etl,取名为循环分页取数 image2025-1-8_10-30-3.png 3.2 设置获取access_token API 把API取数节点拖进画布,并进行配置 image2025-1-8_10-31-43.png 获取access_token 的API取数节点执行后高速缓存库
/common-oceanbase-database-cn-1000000000511007 同时建议oceanbase版本是在v4.3.1以上,可以使用oceanBase AP使用其列式数据库 ETL还不支持Oceanbase作为缓存库。 采购高速缓存MPP模块后,可以根据实际情况选择以上几种数据库中的一种作为高速缓存库。 1、高速缓存库支持将表抽取至 … 是在v4.3.1以上,可以使用oceanBase AP使用其列式数据库 ETL还不支持Oceanbase作为缓存库。 oceanbase01.pngSmartbi Insight V11帮助中心
=35749891 。 11.png 快速入门 • 界面介绍 • 快速准备数据并创建仪表盘 22.png 数据准备与管理 • 数据连接 • 自助ETL • 数据采集 • 指标模型 • 数据模型 33.png 可视化与数据直连&抽取
的变化不会立即更新到数据模型中;需要对模型中的表进行“同步”操作,“同步”之后才会把新字段添加进来,详情可查阅:设置及修改查。 5、若 直连 的是数据仓库,而数据仓库又是通过ETL作业流 进行更新同步的,如果作业流没有执行,直连查询的还是原来的数据。 6、如果是数据模型是 直连 https … 。 zhilin1.png 4 抽取介绍 Smartbi数据模型先把源数据抽取到高速缓存库,然后从高速缓存库中取数。 目前数据模型含有导入文件、JAVA查询、脚本查询、ETL高级查询、存储过程查询、生成日期表(存储在高速缓存库时)这些查询时,必须使用 抽取 模式。 抽取和直连都支持:数据源表、即席查询关系数据源连接报错排查
一、关系数据源连接基本原理 1.jpeg Smartbi的主服务、OLAP、ETL通过JDBC驱动给数据库服务器发送SQL或者JDBC指令,数据库服务器接收请求后分配资源执行作业并在作业结束后将结果回传给驱动,最后BI调用驱动接口获取结果,执行BI的业务逻辑。整个访问链路的核心是JDBC驱动,它是BI和数据库服务器沟通的桥梁。 二、JDBC驱动介绍 JDBC驱动是Java应用与数据库之间的「翻译器」,负责将Java代码中的SQL请求转换为数据库能理解的语言,并把结果返回给Java程序。BI、OLAP、ETL都是Java应用,对数据库的操作依赖于JDBC驱动。市面上有各种各样的数据库,它们提供的JDBC驱动不尽相同。以获取