...
为了应对更多的客户环境需求,指标模型的指标存储库新增支持HANA数据库,详情可查看:数据连接支持情况-汇总 。
3.3 数据模型
+ 数据模型抽取支持分区概要设计数据模型抽取支持分区
...
在最新版本中,数据模型的抽取功能引入了分区设置。这一改进显著提升了大数据量处理的速度,不仅加速了全量和增量数据的抽取过程,还大幅优化了数据查询性能,让数据分析工作更加高效、响应更快。详情可查看:在最新版本中,数据模型的抽取功能引入了分区设置。这一改进显著提升了大数据量处理的速度,不仅加速了抽取过程,还大幅优化了数据查询性能,让数据分析工作更加高效、响应更快。详情可查看:直连&抽取 。
性能对比报告: 硬件配置:内存8G,CPU8核;测试数据库:MySQL 8.0。
场景:在事实表[订单明细表]表中,初始数据量为5KW,分别增量“5KW,增量“插入更新”10w”数据的性能情况:
表名称 | 原始数据 | 增量数据 | 是否分区 | 分区设置 | 增量抽取耗时 | 抽取提升效率 |
订单明细表 | 5KW | 10w | 是 | 按照day分区 | 0.7s |
|
否 | 42s |
...