第91页，共316页。 显示 3,155 条结果 (0.094 秒)
Hadoop-hive数据连接
1 概述 Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。 Hive是建立在 Hadoop 上的数据仓库基础构架。它提供了一系列的工具，可以用来进行数据提取转化加载（ETL），这是一种可以存储、查询和分析存储在 Hadoop 中的大规模数据的机制。 本文介绍如何在smartbi V9.5以上版本中连接Hadoop-hive数据库。 2 数据连接 2.1 配置信息 驱动程序类 连接字符串 驱动程序存放目录 支持数据库版本Doris数据连接
1 概述 Apache Doris 是一个基于 MPP 架构的高性能、实时的分析型数据库，以极速易用的特点被人们所熟知，仅需亚秒级响应时间即可返回海量数据下的查询结果，不仅可以支持高并发的点查询场景，也能支持高吞吐的复杂分析场景。基于此，Apache Doris 能够较好的满足报表分析、即时查询、统一数仓构建、数据 … 连接字符串 驱动程序存放目录 支持数据库版本 org.mariadb.jdbc.Driver jdbc:doris://<servername>:<port>/<database>?useSSL=false 自定义 Doris 2.1.5 驱动类：请到ETL-数据查询节点使用WITH AS 写法执行报错
* from ( 所写sql ) where 1= 0。最终就会导致整个sql语句执行报错。 出现这个问题主要是部分的数据库临时表需要给一个as命名表名导致的，所以目前仅支持部分数据库使用with as语句，如postgreSql、oracle、selectdb、starrocks、doris、mysql8。不支持的数据库有clickhouse、sqlserver、mysql5。值得注意的是其中有些数据库虽然支持，但不支持as后面接中文表名。 解决方案： 1、更换支持临时表的数据库 2、讲临时表落地为视图，然后直接调用视图即可自助数据集-定义流程
自助数据集是一类基于个性化需求的数据集，它面向各阶层用户提供数据查询和抽取服务。 用户可以根据业务要求，通过可视化的方式，使用跨数据库、多表关联、数据转换、复杂逻辑关系计算、数据抽取ETL等功能，将数据提取到自助数据集，这些自助数据集允许被自助仪表盘、透视分析和电子表格进行数据分析应用。 自助数据集的定义流程如下 … ： image99.png 2、弹出“设置表连接”窗口，如下图所示： image20192.png 选择连接方式：内连接、左连接、右连接、全连接。 确定表间连接字段。 同步：原表或原数据集字段增加或删除时，自助数据集利用同步功能更新。 数据来源 操作 关系数据源/高速缓存库创建数据源测试连接常见报错
（本文档仅供参考） 常见错误及原因 1.连接池初始化失败: Communications link failure 01.png 出现这种情况，就需要检查连接的数据库是否可以连接上。可以从这几方面考虑 1）检查连接的数据库是否已经启动。在部署smartbi的那台机器上，使用JDBC数据库工具（例如：DbVisualizer），测试那个数据库是否能够正常连通。 2）连接字符串上的ip、端口是否写对 3）数据库所在服务器是否开启了防火墙，不允许其他服务器连接 2.连接池初始化失败: Access denied for user '用户名'@'ip' (using password: YES) 02.png数据模型结构介绍
数据表 事实数据表用于存储累积的行，这些行表示观察结果或记录特定业务活动的事件。 例如，销售事实数据表中存储的事件可以是销售订单和订单行。 也可以使用事实数据表记录存货变动、存货结余或每日汇率。 事实数据表通常包含大量的行。 随着时间的推移，事实数据表行将累积。 在分析查询（将在此模块的后续部分对它进行定义）中，通过汇总事实数据表数据来生成值，如销售额和数量。 维度表 维度表描述业务实体，这些实体通常表示人员、地点、产品或概念。 日期维度表是常见的概念维度表示例，此表会针对每个日期包含一个行。 借助维度表中的列，可以对事实数据表数据进行筛选和分组。 每个维度表都必须具有一个唯一列，此列称为键列。 唯一列不包含重复的值，并且数据准备快速入门
当您开始使用Smartbi进行数据分析，数据准备模块是您需要入门的第二步，您可以使用自助ETL对新连接的数据进行预处理；也可以基于新连接的数据创建业务主题或数据模型，为接下来的分析展现做准备！ 1、指标模型 功能简介 Smartbi指标管理功能，对业务数据按照企业内部统一规则和标准化计算口径进行处理，形成指标，并且对这些指标进行维护。 特点 （1）实现指标维护审核机制 （2）一站式指标库初始化及管理 （3）支持指标在自助仪表盘或大屏中展现 2、数据模型 面对对象 需提高数据建模灵活性，增强计算能力的业务人员、技术人员 功能简介 数据模型是全新的一体化建模平台，它在多种来源的表和表之间建立关系汇总依据
1 概述 汇总的含义是若干行按照一定的标准变成一行，汇总到更高类别的行级别数据。 汇总依据包括：求和，平均值，计数，去重计数，最大值，最小值，中位数、样本标准差、总体标准差、样本方差、总体方差、百分位数（如5、10、25、50、75、90、95）、属性。其中所有库都可以使用求和，平均值，计数，去重计数，最大值，最小值；只有部分数据库在数据模型引擎V2.0下才能使用中位数、样本标准差、总体标准差、样本方差、总体方差、百分位数（如5、10、25、50、75、90、95）、属性，详细可查看：数据模型汇总依据介绍。 1.1 应用场景 在进行数据分析时，经常需要对度量字段进行汇总依据切换，达到想要查询的数据效果。如统计每个城市透视分析（旧）基于存储过程查询创建报错SQL错误
:49.png 解决方案 首先透视分析如果是基于存储过程创建的话，那么在查询时系统中会先将存储过程的数据抽取到smartbi的缓存数据库中。因此需检查是否是系统中的缓存数据库节点有没有配置好。 V7版本：V7版本对应的数据源节点是“联合数据源”，请确认该数据源节点正常连接。 V8.0版本：V8.0版本对应的数据源节是“联合数据源”或者“SmartbiMPP”，请确认该数据源节点是否正常连接，默认的数据库是infobright或者Vertica，若在电脑上没有安装这些数据库，则需自行安装。 V8.5版本：V8.5版本对应的数据源节点是“高速缓存MPP”，请确认该数据源节点是否正常连接。默认的MPP数据库是infobright或者ShenTong神通（集群）数据连接
1 概述 神通数据库（MPP集群）是企业级大规模并行处理分布式关系型数据库，具有负载均衡、在线扩展、高可靠性等集群特性，并提供丰富的数据分布方案和高速的数据导入性能，同时具有高效的查询处理性能。 本文介绍如何在smartbi V9.5以上版本中连接神通数据库。 2 数据连接 2.1 配置信息 驱动程序类 连接字符串 驱动程序存放目录 支持数据库版本 com.oscar.cluster.Driver jdbc:oscarcluster://<servername>/<database> 自定义 神通xCluster集群件V3.5.8.1（build df391630) 1）连接
