第45页，共455页。 显示 4,545 条结果 (0.37 秒)
如何进行数据的增量抽取
1. 概述 我们在建设数据仓库、数据集市的过程中，通常使用 ETL 工具把数据从“源库”抽取到“目标库”。“源库”中的历史数据，通常数据量特别大，比如有几千万甚至数亿条记录，而历史数据通常又不发生变化。在抽取数据的过程中，如果我们选择全量抽取，对于那些根本不会发生变化的历史数据，也抽取一遍，不仅没有任何意义，还要 … 的目的了。 5. 交叉引用 在数据挖掘模块中，也会有增量抽取的需求。详情请参考：数据挖掘-参数设置 https://wiki.smartbi.com.cn/pages/viewpage.action?pageId=65603816 unrestored-unknown-attachment 设置“过滤3、数据挖掘的Python计算节点集群
Python节点主要用于机器学习的DBSACN算法和自定义模块的python脚本扩展。如果没有用到这两个功能模块，可以不用部署python节点。 数据挖掘服务引擎如果没有用到这两个功能模块，也可以不用部署python节点 Python计算节点集群环境如下： 服务器IP 主机名 组件实例 部署目录 … export PATH=$PATH:$JAVA_BIN 让配置生效 source~/.bash_profile 验证安装 java -version 3、部署Python计算机点集群 Python计算节点集群没有特别设置，只需要在每个服务器中将Python计算节点部署启动完成即可，数据挖掘服务会自动将Python计算如何连接与使用明道云数据源？
部署成功. image2022-3-21_15-56-27.png 1.如果手动运行了自动生成的ETL，没有显示成功，可能是由于没有重启启动挖掘引擎 2.如果是先加载扩展包，然后直接连接了明道云数据源，再去部署挖掘引擎，想要手动重新执行自动生成的计划任务或ETL，并修改ETL对应的时间参数 3.明道云数据源 … 没有任何反应： 9BC5DBB8-9820-4b44-9E91-833F4839F968.png 答：部署了挖掘引擎需要重新启动挖掘引擎或重启smartbi服务； 明道云 明道云插件包 插件数据库 明道云部署 明道云扩展包 favouritePhoenix：在Apache HBase上执行SQL查询
查询会使用恰当的模式 DML支持：用于逐行插入的UPSERT VALUES、用于相同或不同表之间大量数据传输的UPSERT SELECT、用于删除行的DELETE 通过客户端的批处理实现的有限的事务支持 单表——还没有连接，同时二级索引也在开发当中 紧跟ANSI SQL标准 Phoenix代码基于BSD许可 … /forcedotcom/phoenix/blob/master/README.md。 InfoQ：有没有性能评估呢？响应时间是否变快了？可伸缩性是否更好了？ JT：可以在这里https://github.com/forcedotcom/phoenix/wiki/Performance httpsCPU采样粗略分析
调用第三方接口的代码，第三方接口执行慢。4、里边找不到任何和smartbi相关的代码，说明和smartbi没有关系，但这样的情况极少。 1、下载下来的CPU采样导入到【系统监控】–》【性能】上展示： image2019-12-25 17:25:11.png 2、从CPU … :39.png 2.jpg image2019-12-25 18:20:6.png 注：如果是数据库执行SQL慢，一般需要验证当前SQL写的是否需要调优（sql尽量使用执行效率较高的相关语法、数据库表添加索引等），若是SQL本身通过JDBC工具查询没有问题，需要验证操作权限
操作授权是指对角色进行操作权限的分配，控制角色对系统中菜单、功能列表以及具体的报表资源按钮的权限。 操作权限显示效果： 如果用户没有相关的操作权限， 则对应的操作按钮直接不显示。 比如：用户A没有仪表盘的导出权限， 则打开仪表盘时，看不到 导出 按钮 … ）“分析展现”按照“功能入口”分类 184.png 3、第三级的操作权限 控制到各叶子界面中的具体的操作功能。如工具栏中各按钮的显示控制。 185.png 状态 操作权限有三种状态，分别为：勾选、半勾选、未勾选。 czqx-01.png 这三种状态的说明如下： 勾选：该角色具备该操作权限。 半勾选：指Echarts图形-扩展属性：样式 - 地图组件修改选中后的颜色
（本文档仅供参考） 问题描述 仪表盘中使用地图组件时点击之后会有颜色，默认为黄色，系统并没有可修改的配置项 1.png 解决方案 此需求可以通过扩展属性解决，添加下图中扩展属性即可修改点击后的颜色。 { "geo": { "select": { "itemStyle": { "color": "rgba(208,2,27,1)" } } } } 3.png2.png 地图高亮颜色 地图选择颜色附录：扩展包开发规范
。 当使用空库恢复知识库时候，项目启动过程是。 1、先启动项目，然后加载扩展包。这时候扩展包里面用于建表的升级类会在数据库建立一张空表。 2、当项目启动完全时候，点击恢复知识库，这时候项目会先删除掉有注册知识库对象的表，再新建这张表，然后将备份的数据恢复。 注意：没有注册知识库对象的表里面的数据是不会被备份的。所以建表升级类必须注册知识库对象。切记。 12 扩展包记录新增定制的功能 每做一项新的定制需求，需要在对应的扩展包下的word文档里记录该需求的需求说明、回复给客户的定制说明、以及定制的开发人员，如果没有word文档，开发人员在扩展包下新建即可。这份文档需要迭代更新到git上面，以保证Clickhouse中文字段别名join后报错
（本文档仅供参考） 现象： 以clickhouse作为数据源，创建即席查询/透视分析，报错如下，排查sql拼接有问题： image2022-10-8_15-24-51.png 原因： Clickhouse在处理中文别名字段时存在bug： 在字段别名没有中文的情况下，clickhouse支持多表同一层join。在字段别名有中文的情况下，clickhouse只支持两表同一层join。 解决方案： 在当前sql拼接逻辑是多表同一层join的情况下，需要保证每张表的字段别名没有中文。 clickhouse使用join报错 mpp在jion后报错角色资源授权问题
（本文档仅供参考）（V10.5及以下版本适用） 问题说明 角色资源授权没有勾选业务主题和数据源，但是创建即席查询的时候还是可以能看到。 image2023-7-24_15-9-7.png 解决方案 可以查看业务主题及数据源 右键-资源授权里是否有其他权限：如下图 可以看到业务主题右键-资源授权里有Everyone,即使角色-资源授权里没有勾选也会看到，所以需要把everyone给删除，另外数据源的授权也是同样的操作。 image2023-7-24_15-9-35.png
