“田家少闲月,五月人倍忙。夜来南风起,小麦覆陇黄”。
1
...
发布月份
2024年 04月05月。
2 更新概览
...
1、增强制作报表易用性、提升用户体验,如Web电子表格支持导入Excel文件、即席查询和透视分析支持宏资源包。
2、提高自然语言解析准确性、维护数据语义清晰性,如数据模型支持设置项控制字段别名是否唯一。
3、增强ETL数据处理能力,满足更多项目需求,如ETL新增循环API节点、ETL目标表支持星环数据库holodesk格式等。
4、方便运维管理,提高运维效率,如缓存库连接支持指定Schema,表结构检查增加检测内容并支持一键修复、支持仅备份恢复部分知识库表等。
3 详细更新内容
3.1 数据准备
+ 高速缓存库支持StarRocks(示例待删除)
在国家大力提倡信息技术自主创新的大背景下,高速缓存库兼容适配国产开源数据库StarRocks。StarRocks在海量数据处理与实时分析领域,以及数据处理的安全性、高效性和可控性等都有明显优势,可以为用户提供更加灵活和高效的数据处理方案。详情可查看:高速缓存库。
3.2 数据模型
+
3.3 指标模型
^
3.4 自助ETL
^ ETL目标表支持星环数据库holodesk格式
holodesk是星环数据库新推出的存储格式,表查询性能比orc格式快十多倍。ETL创建星环数据库目标表时,之前只支持orc格式,现在能选择holodesk存储格式。
^ ETL新增循环API取数节点
从SaaS产品的接口取数时,接口只能返回有限行数的数据,所以获取全量数据就需要循环调用接口。ETL处理该场景时,之前配置较为复杂,需要组合几处功能。新增的循环API取数节点,能够方便的处理该场景。
^ ETL作业流新增”参数输出“节点
ETL作业流会包含数个ETL作业,部分关键作业的失败可能会导致整体作业流的失败。为增强ETL作业流的健壮性,新增了”参数输出“节点,可按输出结果配置多个任务分支,避免导致因单个ETL执行失败导致整个作业流失败。
3.5 交互式仪表盘
^ 组件锁定后会固定当前图层浮动层级(示例待删除)
为了方便用户选中、编辑某个组件,系统会默认将选中的组件图层自动置于顶层。但在实际场景中,有些组件仅起到装饰、辅助的作用,例如背景、边框等,这类组件若在选中后置于顶层,反而不方便用户调整效果。在新版本中,交互式仪表盘支持锁定组件后,组件将保持原有图层浮动层级,不会再自动置于顶层。如下图所示:
2000
+ 仪表盘组件的右键菜单增加“进入即席查询模式”和“进入透视分析模式”功能
为方便用户可快速查看组件明细数据和对组件的数据进行分析汇总。
3.6 Web电子表格
+
...
^ 高速缓存库连接支持指定Schema
...
企业部署了多套BI系统,且系统间知识库相互独立。在旧版本中需要部署多个高速缓存库对应不同BI系统,增加运维成本。在新版本中,高速缓存库连接可直接在连接字符串中指定Schema,极大减少了独立部署缓存库的工作,方便运维管理。
^ 数据模型支持字段别名唯一
...
为了方便用户使用,产品不同目录支持存在相同的字段别名,但自然语言无法正确识别语义。为了确保自然语言精准解析,新版本中支持对数据模型设置是否允许字段等跨目录重名。
3.2 自助ETL
^ ETL目标表支持星环数据库holodesk格式
...
星环数据库9.3推出了新一代湖仓集存储格式holodesk,表查询性能比orc格式快十多倍。为适配新版本的星环数据库,ETL创建星环数据库目标表时,增加了holodesk选项。
+ ETL新增循环API节点
...
从SaaS产品的接口取数时,接口只能返回有限行数的数据,所以获取全量数据就需要循环调用接口。旧版本要实现该场景必须结合作业流的循环器功能,新版本ETL增加了循环API节点,可直接完成获取全量数据过程。
+ 作业流新增参数输出节点
...
作业流会包含数个作业,部分关键作业的失败可能会导致整体作业流的失败。为增强作业流的健壮性,在新版本中,新增了”参数输出“节点,可按输出的结果数据执行不同的任务分支,避免因单个作业执行失败导致整个作业流失败。详情可参考:参数输出 。
3.3 Web电子表格
+ 支持通过导入本地Excel文件创建Web电子表格
...
用户通常在本地Excel文件中已规划好了报表的样式、内容布局等,用户希望只需添加字段并进行简单设置,即可发布为报表。在新版本中,Web电子表格新增“导入Excel文件”功能,用户可在Web电子表格导入本地的Excel文件作为模板来设计电子表格,提高制作报表效率。
3.4 即席查询&透视分析
+ 支持宏资源包功能
...
这是产品原来旧版即席查询和透视分析就支持的功能,新版即席查询和透视分析继续支持。主要是解决一些通用的宏代码需要针对每个报表单独设置的问题。宏资源包可批量应用到多个目标资源上,提高制作报表效率。新版本宏资源包增加对V11新即席查询和新透视分析的支持。
+ 即席查询与透视分析的报表可以支持相互转换
这个功能主要是解决用户使用即席查询、透视分析过程中快速生成报表的问题。例如:用户在使用即席查询过程中,发现不能满足业务数据需求,需要汇总数据,新建一个透视分析,还需要把所有的字段及条件等重新选择一遍,太过麻烦,该功能就可以快速解决此类问题,用户可以通过点击即席查询工具栏上的 “进入透视分析模式”,快速新建一张选取同样维度和度量字段的透视分析报表。
3.8 其它
^ 资源的”描述“长度扩大到”2000字节“
随着即席查询、透视分析、交互式仪表盘越来越受业务人员的喜欢,维度、度量值的来源、口径、说明等信息,对于业务人员的使用就尤其重要。为此,我们特意把资源的”描述“长度扩大到”2000字节“,可以存储更多的信息。
^ 系统检查功能中的“表结构检查”优化并支持一键修复
“系统检查”功能中的“表结构检查”是已有的功能,检测的内容包括:知识库中表是否缺少、表结构是否完整;并且无法进行修复。对“表结构检查”进行优化:检测内容增加 “表字段数据类型是否正确”的检查;并在详细信息中罗列具体信息及修复参考SQL语句。
支持通过点击“修复”进行一键修复
^ 备份知识库支持三种选项“仅备份非日志表”、“仅备份日志表”、“备份所有表”
备份知识库时提供“备份日志表”的选项,可选择备份的知识库文件中是否要包含日志表。在审计相关的需求中,日志表需要进行单独的备份和恢复,因此优化备份知识库功能,支持选择三种选项“仅备份非日志表”、“仅备份日志表”、“备份所有表”。详情可查看:(此处待移动空间后加锚点链接)
注:此优化与202404产品近期更新配合使用
^ 备份知识库功能增加系统检查过程
在升级版本或者迁移环境过程中,若备份的知识库文件中的表结构不正确,那么极有可能导致恢复知识库失败从而升级失败或迁移失败。为规避此类风险,在备份知识库过程中自动进行“系统检查”中的“表结构检查”与“表索引检查”,并提醒用户进行修复。用户可选择忽略提示直接备份。
...
“恢复知识库”功能原逻辑是全量恢复,会将知识库中所有系统表删除并使用备份的知识库文件进行恢复。为满足备份恢复日志表的需要,“恢复知识库”功能支持部分恢复:在选择知识库备份文件后,仅针对该备份文件中的表在知识库中进行恢复。
^Config界面恢复知识库支持上传本地知识库备份文件
通过Config界面入口进入的“恢复知识库”界面,支持上传本地知识库备份文件
...
3.5 公共模块
^ 计划中增加作业流执行计划功能
...
计划任务是产品的基础功能,可以监控到其它所有模块使用的计划信息。新版本增加了对“作业流”使用计划的监控,方便统一的运维管理。
^ 系统检查功能中的“表结构检查”优化并支持一键修复
...
系统表结构异常会影响整个系统的使用,修复错误的表结构的周期经常在1天以上。新版本中,系统“表结构检查”增加检测 “表字段数据类型是否正确”,并支持一键修复异常的表结构,对于无法一键修复的问题,也提供具体错误信息及修复参考语句,极大提升系统修复效率。
信息 |
---|
并不是所有表结构异常情况都可以自动修复,若自动修复失败,需要手动在知识库中进行操作处理。 |
^ 备份恢复知识库功能增强
...
项目使用产品过程中,因特殊原因导致知识库表结构等不正常,不过并不影响当前环境的使用;但在升级版本或者迁移环境时,恢复知识库会自动对表结构等进行严格的检测,不正常的知识库表结构会导致系统无法正常使用。为了避免这类问题出现,产品对备份恢复知识库过程做了增强,包括:
- 备份知识库时,会自动进行“系统检查”中的“表结构检查”与“表索引检查”,并提醒用户进行修复。
- 备份知识库时,增加选择是否单独备份日志表,满足审计相关场景中,日志表的单独备份和恢复。
- 恢复知识库时,支持只恢复部分表,可以把有问题的表调整正确后再单独恢复。
- 当服务器因为知识库表问题启动不成功时,可通过产品Config界面中的恢复知识库功能,只恢复影响启动的表,更方便快捷的解决问题。
详情可查看:备份知识库 。