1.需求背景
随着自助分析的推广,越来越多的业务人员自己进行分析和使用,而运维人员需要对资源的相关信息进行统计、分析、跟踪。
需求说明:
1、要能统计宽表的使用频率,以及对应的影响,定时删除不常用的宽表
2、需要进行整体的运行情况分析,向领导进行汇报说明
3、要导出相关信息,定时备案
2.功能说明
元数据分析的数据会落地到知识库中。
3.使用说明
3.1. 扩展包部署
扩展包: PD_MetadataAnalysis
部署说明:扩展包部署
注意:更新扩展包之前,请做好知识库以及扩展包的备份。
3.2. 设置说明
管理员登录系统后,在【运维设置】- 【系统选项】 - 【SQL监控设置】中,可以设置“SQL监控过滤账号”,减少相关日志的记录。
默认:admin,sysservice,biadmin
注意:多个账号以英文逗号分隔。
说明:如果看不见此项标签,请清除浏览器缓存 或者 【运维设置】中,点击“清空缓存”。
3.3. 使用说明
部署扩展包后,会在知识库中增加三个物理表,记录相关信息。
t_ext_res_map_effect(资源影响性分析数据记录表)
字段名 | 类型 | 说明 |
---|---|---|
c_id | varchar(255) | 唯一ID |
c_res_id | varchar(255) | 资源ID |
c_effect_id | varchar(255) | 影响的资源ID |
t_ext_res_map_descent(资源血统分析数据记录表)
字段名 | 类型 | 说明 |
---|---|---|
c_id | varchar(255) | 唯一ID |
c_res_id | varchar(255) | 资源ID |
c_descent_id | varchar(255) | 影响的资源ID |
t_ext_respath(资源路径数据记录表)
字段名 | 类型 | 说明 |
---|---|---|
c_id | varchar(255) | 唯一ID |
c_res_id | varchar(255) | 资源ID |
c_path | varchar(1000) | 路径 |
c_creator | varchar(255) | 创建者(可能是群组名、角色名或用户名,也是资源拥有者) |
注意:
1)除run状态之外的都会被记录其中。
2)数据源为SmartbiCache的查询暂时无法记录到IP和资源ID,会设置为null。