增强数据集即Smartbi-OLAP-Server,用于实现将所有查询结果归集后,基于CUBE模型重新构建数据结构。
这个CUBE模型主要以“维度”和“度量”进行构建,同时增加了“成员”和“命名集”的创建,实现了增强数据集构建的灵活性及应用广泛性。
增强数据集支持数据来源有:数据源表、数据文件、SQL查询、即席查询、脚本查询、存储过程查询和ETL高级查询。
增强数据集可用于定制自助仪表盘和电子表格。
1、系统环境准备
1.1防火墙配置1、系统环境准备
注意 | ||
---|---|---|
| ||
配置防火墙,selinux相关操作,需要管理员权限。 该文档针对linux环境,ARM架构下需要使用响应jadk环境,并修改jdk路径指向。startup_deamon.sh/shstartup_olap.sh |
1.1 防火墙配置
为了便于安装,建议在安装前关闭防火墙。使用过程中,为了系统安全可以选择启用防火墙,但必须启用服务相关端口。
1. 关闭防火墙
临时关闭防火墙
代码块 | ||
---|---|---|
| ||
systemctl stop firewalld |
永久关闭防火墙
代码块 | ||
---|---|---|
| ||
systemctl disable firewalld |
查看防火墙状态
代码块 | ||
---|---|---|
| ||
systemctl status firewalld |
2. 开启防火墙
相关服务及端口对照表:
服务名 | 端口 |
---|---|
Smartbi - OLAP - Server | 18081 |
开放端口的条件:smartbi-tomcat和olap引擎部署在不同的机器,或者olap需要集群部署时,需要开放olap端口;
如果确实需要打开防火墙安装,需要给防火墙放开以下需要使用到的端口
开启端口:18081
代码块 | ||||
---|---|---|---|---|
| ||||
firewall-cmd --zone=public --add-port=18081/tcp --permanent |
配置完以后重新加载firewalld,使配置生效
代码块 | ||||
---|---|---|---|---|
| ||||
firewall-cmd --reload |
查看防火墙的配置信息
代码块 | ||||
---|---|---|---|---|
| ||||
firewall-cmd --list-all |
3. 关闭selinux
临时关闭selinux,立即生效,不需要重启服务器。
代码块 | ||||
---|---|---|---|---|
| ||||
setenforce 0 |
永久关闭selinux,修改完配置后需要重启服务器才能生效
代码块 | ||||
---|---|---|---|---|
| ||||
sed -i 's/=enforcing/=disabled/g' /etc/selinux/config |
2、部署Smartbi OLAP Server
注意 | ||
---|---|---|
| ||
1、安装、部署、启动Smartbi OLAP Server等,可以使用普通用户权限进行操作。 2、部署过程中用普通用户操作,则后续的所有运维操作等,都需要用普通用户来执行。如果切换其他用户操作,可能会因为权限问题导致服务启动失败。 3、Smartbi OLAP Server的端口配置如果小于1024,也需要管理员权限才能启动Smartbi OLAP Server服务。 |
2.1 安装Smartbi
-OLAP
-Server
解压安装包到指定目录
代码块 | ||
---|---|---|
| ||
tar -zxvf smartbi-olap-serverSmartbi_OLAP_linux.tar.gz -C /data |
启动Smartbi - OLAP - Server
代码块 | ||
---|---|---|
| ||
cd /data/smartbi-olap-serverSmartbi_OLAP_linux #给sh文件授予可执行权限 chmod +x *.sh # 前端启动方式,日志信息直接打印在屏幕上,多用于调试 sh ./startup_deamon.sh # 后台启动方式,启动日志存放在当前目录的 nohup sh ./startup_deamon.sh & |
注意 | ||
---|---|---|
| ||
Smartbi - OLAP - Server服务默认端口为18081,如果该端口已被使用,可以通过修改application.properties文件,更换端口,参考下图: |
注意 | ||
---|---|---|
| ||
Smartbi OLAP Server服务设置最大JVM内存,可以通过修改startup_olap.sh脚本文件设置,参考下图: |
2.2 Smartbi连接Smartbi
-OLAP
-Server
配置spark计算节点,打开系统运维–高级配置打开系统运维–系统选项-高级设置,添加以下配置:
OLAP_QUERY_HTTP_URL=http://IP:18081/smartbiolap/smartbiquery #注意替换成实际的Smartbi - OLAP - Serve IP地址和端口
配置完成后保存即可。
2.3 运维操作
①停止① 停止Smartbi - OLAP - Server服务
代码块 | ||
---|---|---|
| ||
cd /data/smartbi-olap-server ps -ef | grep SmartbiOLAPServer Smartbi_OLAP_linux ./stop_deamon.sh |
注意 | ||
---|---|---|
| ||
|
② 启动Smartbi OLAP Server服务
代码块 | ||
---|---|---|
| ||
cd /data/smartbi-olap-serverSmartbi_OLAP_linux nohup sh ./startup_deamon.sh & |
③升级③ 升级Smartbi - OLAP - Server服务
Smartbi - OLAP - Server服务升级一般只需要替换文件,并重新启动即可,可参考以下步骤:
停止Smartbi - OLAP - Server服务
代码块 | ||
---|---|---|
| ||
cd /data/smartbi-olap-server ps -ef | grep SmartbiOLAPServer #查找Smartbi-OLAP-Server进程 kill -9 进程IDSmartbi_OLAP_linux ./stop_deamon.sh |
备份旧文件
代码块 | ||
---|---|---|
| ||
cd /data/smartbi-olap-serverSmartbi_OLAP_linux mv SmartbiOLAPServer.jar SmartbiOLAPServer.jar_bk |
上传新的jar文件后,重新启动服务
代码块 | ||
---|---|---|
| ||
cd /data/smartbi-olap-serverSmartbi_OLAP_linux nohup sh ./startup_deamon.sh & |
注意 | ||
---|---|---|
| ||
如果没有startup_deamon.cmd,则需要自己下载application-deamon.properties,startup_deamon.sh,stop_deamon.sh,SmartbiOLAPDeamon.jar并上传到Smartbi OLAP的部署目录,如下图所示 |
④ 查看Smartbi OLAP Server日志:
安装部署或者使用中有问题,可能需要根据日志来分析解决。
2.4设置SmartbiOLAP开机启动
注意 | ||
---|---|---|
| ||
配置开机启动相关操作,需要管理员权限。 |
进入/etc/init.d目录,创建smartbi-olap启动配置文件
代码块 | ||
---|---|---|
| ||
sudo vi /etc/init.d/smartbi-olap |
配置参考如下:
代码块 | ||||
---|---|---|---|---|
| ||||
#!/bin/bash # chkconfig: 345 80 20 # description: start the smartbi olap deamon # # Source function library . /etc/rc.d/init.d/functions prog=smartbi-olap OLAP_HOME=/home/smartbi/Smartbi_OLAP_linux #注意替换成实际的smartbi olap路径 export OLAP_HOME case "$1" in start) echo "Starting olap server..." cd $OLAP_HOME $OLAP_HOME/startup_deamon.sh & ;; stop) echo "Stopping olap server..." cd $OLAP_HOME $OLAP_HOME/stop_deamon.sh & ;; restart) echo "Stopping olap server..." cd $OLAP_HOME $OLAP_HOME/stop_deamon.sh & sleep 2 echo echo "Starting olap server |
安装部署或者使用中有问题,可能需要根据日志来分析解决。
..."
cd $OLAP_HOME
$OLAP_HOME/startup_deamon.sh &
;;
*)
echo "Usage: $prog {start|stop|restart}"
;;
esac
exit 0 |
设置开机启动
代码块 | ||
---|---|---|
| ||
sudo chmod +x /etc/init.d/smartbi-olap #添加执行权限
sudo chkconfig smartbi-olap on #添加到开机启动
sudo chkconfig --list #查看开机启动服务列表 |
注意事项
Smartbi OLAP Server为数据模型提供多维分析能力,数据模型需要靠它去取数、实现多维计算的功能。如果通过OLAP Server查询取数需要使用到客户自定义的数据库驱动类,则需要将自定义驱动同步到Smartbi OLAP上。
同步自定义驱动到Smartbi OLAP的方案请参考 自定义驱动同步到OLAP