第28页，共561页。 显示 5,602 条结果 (0.039 秒)
数据挖掘-数据预处理
在数据挖掘中，海量的原始数据存在着大量不完整、不一致、有异常的数据，严重影响到数据挖掘建模的执行效率，甚至可能导致挖掘结果的偏差，所以进行数据预处理就显得尤为重要。 Smartbi拥有强大数据处理功能，对各种结构化数据，可进行排序、去重、映射、行列合并等处理，满足客户日常数据处理的需要。 使用数据预处理可以： 1、提高数据的质量。 2、让数据更好地适应特定的挖掘技术或工具。 数据预处理关系数据源数据权限
针对关系数据源创建的数据权限。 在关系数据源中通过对查询的目标表设置数据权限，当即席查询、可视化数据集和电子表格中涉及到这个数据源的这些表时，数据权限设置条件会自动启用。 设置数据权限 1、进入数据权限设置页面。 入口一：在关系数据源的更多操作0.jpg，选择 设置数据权限，进入“设置”界面。 image2020-3-12 18:40:14.png 选择需要设置数据权限的表，在表的更多操作0.jpg，选择 设置 ，进入“数据权限设置”界面。 image2020-3-11 16:23:29.png 入口二：在关系数据源下需要设置数据权限的表中选择更多操作0.jpg，选择 设置数据权限，进入“数据权限设置”界面数据模型结构介绍
1 概述 Smartbi的数据模型实现将所有查询结果归集后，基于CUBE模型重新构建数据结构：以“维度”和“度量”进行构建，同时增加了“成员”和“命名集”的定义，实现了数据模型构建的灵活性及应用广泛性。 Smartbi的数据模型基于成熟的建模理论和方法，总体而言主要体现在两方面：模型架构和模型表关系。 事实数据表 事实数据表用于存储累积的行，这些行表示观察结果或记录特定业务活动的事件。 例如，销售事实数据表中存储的事件可以是销售订单和订单行。 也可以使用事实数据表记录存货变动、存货结余或每日汇率。 事实数据表通常包含大量的行。 随着时间的推移，事实数据表行将累积。 在分析查询（将在此模块的后续部分对它进行定义）中，通过汇总创建数据源测试连接常见报错
（本文档仅供参考） 常见错误及原因 1.连接池初始化失败: Communications link failure 01.png 出现这种情况，就需要检查连接的数据库是否可以连接上。可以从这几方面考虑 1）检查连接的数据库是否已经启动。在部署smartbi的那台机器上，使用JDBC数据库工具（例如：DbVisualizer），测试那个数据库是否能够正常连通。 2）连接字符串上的ip、端口是否写对 3）数据库所在服务器是否开启了防火墙，不允许其他服务器连接 2.连接池初始化失败: Access denied for user '用户名'@'ip' (using password: YES) 02.png数据模型预览报错，提示了一串乱码，但报错sql可以在数据库工具执行
（本文档仅供参考） 问题描述 在数据模型中创建SQL子查询，子查询预览是正常的，且是带有参数的情况下也可以正常执行，但在数据模型页面，将维度作为筛选器并筛选时，报错： image2024-12-30_17-1-36.png 如上图，对年月进行过滤时，报错，但是里面报错的sql放到数据库工具执行是正常的。 解决方案 通常是由于数据源配置的链接字符串里面的编码和数据库的编码不一致导致，在上述问题中，将数据源的字符集修改得与数据库的一致后问题已解决。 编码不一致SQL/原生SQL数据集数据权限
基于数据源和业务主题创建的数据权限原则上对于书写的SQL语句的数据集，如SQL数据集和原生SQL数据集是不生效的。 如果对SQL数据集和原生SQL数据集实现数据权限，则需要对SQL数据集本身的where条件中直接加上限制条件。 操作入口 在“数据集”界面打开SQL数据集或是原生SQL数据集。 进入“数据集”界面的入口： 入口1：选择系统快捷菜单 数据集 。 494.png 双击所需的SQL数据集或原生SQL数据集或在其更多操作0.jpg，选择 打开。 495.png 如需使用“SQL数据集或原生SQL数据集”，需更换一个包含"SQL数据集或原生SQL数据集”的License授权文件。 实现方式 在SQL多维数据源数据权限
多维数据源中数据权限的设置通过限制用户访问多维数据集中维成员和度量值的权限而实现。 管理角色不受数据权限控制。 对某维度层次结构或度量值设置了数据权限，在定制多维分析时若没有选择该维度成员或度量值，系统默认在MDX语句添加上过滤内容。 操作入口 在“多维数据源”的数据集的更多操作0.jpg，选择 设置数据权限，则进入“设置数据权限”界面。 26.png 界面介绍 27.png “数据权限设置”界面主要分为以下几个区域： 可选资源区：该区主要列出了设置数据权限可使用的资源。 设置区：该区为设置所选维度数据权限的主要区域。系统提供三种设置方式：映射设置、简单设置和高级设置。 功能参数 - 基于带参数数据模型创建电子表格，参数默认显示全部
（仅供参考） 基于数据集模型创建的电子表格通过参数进行数据筛选时，有些情况下用户希望当不选择参数值、或选择“全部”、“所有”这样的参数值时返回所有数据。基于这样的需求，具体操作参考如下示例。 电子表格参数默认值显示“全部”效果下图 image2022-5-24_11-54-56.png 实现步骤如下 方案1 1、创建带参数数据模型。创建过程参考“数据模型-参数应用”中的SQL查询示例，需注意SQL绑定参数部分如下图方式书写： image2022-5-24_11-49-35.png 2、在参数设置中设置默认值和备选值，设置方式如下： image2022-5-24_11-53-43.png 此SQL示例数据Excel导入模板导入数据到Impala数据库，字符串数据被截取
（本文档仅供参考） 问题说明： Excel导入模板中，某个字段绑定导入当前登录的用户名，例如：管理员，导入后发现只导入了“管”。 image2020-8-25_17-43-12.png 原因： Smartbi在导入数据时会执行标准的insert语句：insert into table value ( ...) 把数据插入到数据库，但是Impala数据库对此语法支持不好，导致导入的字符串会被截取。若是可以联系到维护厂商，让厂商从数据库上修复支持，这是最好的！ 具体验证说明如下： 1、smartbi在回写数据时系统会拼接出以下格式的SQL，insert into table value ( ?,?,?) :['a','b3、数据挖掘的Python计算节点集群
Python节点主要用于机器学习的DBSACN算法和自定义模块的python脚本扩展。如果没有用到这两个功能模块，可以不用部署python节点。 数据挖掘服务引擎如果没有用到这两个功能模块，也可以不用部署python节点 Python计算节点集群环境如下： 服务器IP 主机名 组件实例 部署目录 … -i 's/=enforcing/=disabled/g' /etc/selinux/config 2. 安装前配置 1、配置主机名映射 如果服务器已配置hosts环境信息，则无需重复配置 将数据挖掘组件中的服务器主机名映射到hosts文件中 vi /etc/hosts 文件末尾添(根据实际环境信息设置
