第2页,共143页。 显示 1,427 条结果 (0.023 秒)
Smartbi V10-数据连接
注意:(新特性列表中:+表示新增;^表示增强) V10版本重点对“加载文件数据”功能进行了优化和完善,详细改进情况如下: 新增 增强 变更 +【数据连接】Hadoop_Hive、IMPALA等大数据源支持Kerberos认证,提升数据安全性 +【数据连接】产品支持加载包含多个Sheet页的数据文件 +【数据连接】多维分析Mondrain版本升级同步到主线 ^【数据连接】优化数据编辑权限和导入文件权限 ^【数据连接】优化数据源连接配置项 +【数据连接】Hadoop_Hive、IMPALA等大数据源支持Kerberos认证,提升数据安全性 背景星环Inceptor数据连接
1 概述 本文介绍如何在smartbi V10以上版本中连接星环Inceptor数据库(目前只支持hive)。 2 数据连接 2.1 配置信息 驱动程序类 连接字符串 驱动程序存放目录 支持数据库版本 org.apache.hive.jdbc.HiveDriver jdbc:hive2://<servername>:10000/default 自定义 星环 5.1.2 1)连接字符串主要信息说明: <servername>:数据库的地址,一般可以向数据库管理员获取; 10000:数据库默认端口; default:数据库Huawei FusionInsight HD 数据源连接问题
(本文档仅供参考) 问题描述 参考文档 关系数据源-连接HuaWei FusionInsight HD https://history.wiki.smartbi.com.cn/pages/viewpage.action?pageId=44500374连接华为hive数据库报如下错误: SQL错误:org.apache.hive.jdbc.ZooKeeperHiveClientException: Unable to read HiveServer2 configs from ZooKeeper at smartbi.connectionpool.ConnectionPool$5.createConnection连接Kerberos认证的星环数据源
: 配置项 说明 名称 数据源连接名称,不可为空 驱动程序存放目录 选择“自定义”并在下拉框中选择”XINGHUAN" 连接字符串 jdbc:hive2://10.10.204.60:10000/default;principal=hive/tdh02@TDH;kuser=hive@TDH;keytab=/opt/kerberos/xinghuan/hive.keytab;krb5conf=/ opt/kerberos/xinghuan/krb5.conf;auth=kerberos 连接方式 Kerberos认证 客户端PR keytab文件对应的principal关系数据源-连接Kerberos认证的星环数据源
: image2021-4-7_11-16-22.png 主要配置信息说明: 配置项 说明 名称 数据源连接名称,不可为空 驱动程序存放目录 选择“自定义”并在下拉框中选择”XINGHUAN" 连接字符串 jdbc:hive2://10.10.204.60:10000/default;principal=hive/tdh02@TDH;kuser=hive@TDH;keytab=/opt/kerberos/xinghuan/hive.keytab;krb5conf=/ opt/kerberos/xinghuan/krb5.conf;auth=kerberos 连接方式 Kerberos认证 客户端PRImpala与Hive的比较
也与State Store保持连接,用于确定哪个Impalad是健康和可以接受新的工作。在Impalad中启动三个ThriftServer: beeswax_server(连接客户端),hs2_server(借用Hive元数据), be_server(Impalad内部使用)和一个ImpalaServer服务 … 1. Impala架构 Impala是Cloudera在受到Google的Dremel启发下开发的实时交互SQL大数据查询工具,Impala没有再使用缓慢的Hive+MapReduce批处理,而是通过使用与商用并行关系数据库中类似的分布式查询引擎(由Query Planner、Querypresto+hive高速缓存库数据库管理添加数据源报错
(本文档仅供参考) 问题 使用高速缓存库添加数据源的时候报错。 解决方案 1、此时需要排查是否对应数据源的驱动添加到了presto目录了 2、如将hive中对应的驱动放置高速缓存库的presto目录下即可 3、路径如下: image2021-11-21_15-42-7.png presto+hive高速缓存库添加表报错Excel导入模板导入到hive数据库报错:default please use full queue path instead.
(本文档仅供参考) 问题说明 Excel导入模板导入数据到hive数据库时会有如下报错内容,该如何解决呢? image2024-7-27_11-15-59.png 解决方案 从日志中反馈的信息分析是在执行insert语句的时候驱动提示的报错。经和hive数据库方沟通,具体报错信息其实是在执行插入的时候没有提交“队列”引起的,通过JDBC方式插入数据的时候可以通过:SET mapreduce.job.queuename=xxx(具体指定的队列名称),这个语句设置要插入的队列。而对于BI来说,可以在数据源连接字符串的时候添加这个参数处理:tez.queue.name http星环hive数据库支持非分区表回写
(本文档仅供参考) 问题说明 数据库是星环的hive数据库,回写的时候,报解析错误。 image2024-11-1_10-33-48.png 查看建表语句,有分区语法,尝试删掉分区语句重新建表,同样的回写场景,成功 image2024-11-1_10-39-17.png 结论 不支持hive数据库的分区表回写,请在建表时改成非分区表Presto+Hive