第18页,共72页。 显示 711 条结果 (0.429 秒)
企微消息推送使用media_id问题
(本文档仅供参考) 问题描述 参考wiki文档消息推送:消息推送,任务代码有个media_id,这个是需要从哪里获取? image2025-2-8_17-45-38.png 问题分析 media_id是需要通过企微工具箱中上传素材模块功能生成,该部分是与微信临时上传接口进行上传并获取的,每上传一次便随机生成一个media_id。但需要注意的是,因为是调用的微信临时上传接口,该media_id是一个临时ID,只有3天的有效期。因此如需使用该media_id,需以3天为一个周期,在企微工具箱中重新生成media_id并更新到任务代码中。 image2025-1-2_10-2-16.png1、部署数据挖掘
数据挖掘包含两大部分:数据挖掘执行引擎、数据挖掘服务引擎 数据挖掘执行引擎: 负责接收Smartbi 发送执行请求。 通过解析执行定义,生成spark 计算任务或python计算任务,分别发送给spark集群或python集群。 本身并不承担计算任务,只负责计算任务的调度跟分发。 数据挖掘服务引擎 … 计算任务或python计算任务,分别发送给spark集群或python集群。 本身并不承担计算任务,只负责计算任务的调度跟分发。 数据挖掘服务引擎: 提供模型预测服务给第三放系统调用 数据挖掘执行引擎和服务引擎可部署在同一台服务器中,也可以分开部署在不同服务器中。 单机部署数据挖掘组件环境如下2、数据挖掘spark计算节点集群
部署spark计算节点 1、数据挖掘数据量2000万、15个并发任务时以下时,只需要提升数据挖掘服务器配置即可。 2、数据量和并发数超出时,可部署多个计算节点,执行引擎会将计算任务调度到部署的计算节点。 3、计算节点和执行引擎是主从架构,执行引擎是主节点,计算节点是从节点。 1、基础环境准备 参考0、系统环境配置 文档,完成操作系统的基础配置 1.2 启动挖掘计算节点 1、解压Smartbi-engine安装包到指定的安装目录 tar -zxvf SmartbiMiningEngine-V11.0.tar.gz -C /data 2、登陆smartbi服务器,打开运维设置–数据挖掘配置–引擎设置,复制Spark代理器新建计划
。 计划描述 表示对当前计划的描述信息。 待执行任务 表示选择当前计划执行的任务。允许选择多个任务。 触发类型 表示触发该计划执行的类型,目前只支持"时间"类型。 表示执行该计划的频率,主要包含:一次性、每分、每时、每天、每周、每月、手工输入。 是否启用 表示是否启用当前计划 … :14.png 提醒内容 设置推送的消息提醒中需包含的内容,可以使用系统默认值也可自定义其内容。 默认 使用系统内置的全部提醒内容以及固定的消息提醒格式,提醒内容包含:任务ID、任务名称、执行结果、执行时长、开始执行时间、结束执行时间、关联资源ID、关联资源名称、异常说明、日志导出。 通过系统消息的方式元数据分析落地到知识库
://wiki.smartbi.com.cn/pages/viewpage.action?pageId=111890412 注意:更新扩展包之前,请做好知识库以及扩展包的备份。 3.2. 使用说明 3.2.1、通过“计划任务”,定时抽取元数据分析数据落地到物理表 扩展包部署后,会新增一个任务脚本【资源元数据分析同步任务】,和一个计划【资源元数据分析同步计划】,会在每天凌晨4点执行该计划(可以按需修改对应的计划配置)。 注意: 1)计划的执行必须在服务器的空闲时间进行,否则会影响到服务器的正常使用。 2)如果资源非常多,建议按要分析的资源类型来获取相关数据,减少服务器的压力。 任务子流程应用-信息采集审批
子流程的最大特点是:它隐含着上级对下级的任务发起要求,因此它必须由主流程进行任务的发起,才能流转到子流程的进程中;除此之外,子流程是一个完整的流程。 子流程支持回退。 子流程适用于需要通过总部下发的审批任务,例如总部的信息采集等。 本示例是基于总的信息采集任务审批情景来演示子流程的业务分析、流程定制和流程审核过程。 视频学习:子流程应用-信息采集审批
子流程的最大特点是:它隐含着上级对下级的任务发起要求,因此它必须由主流程进行任务的发起,才能流转到子流程的进程中;除此之外,子流程是一个完整的流程。 子流程支持回退。 子流程适用于需要通过总部下发的审批任务,例如总部的信息采集等。 本示例是基于总的信息采集任务审批情景来演示子流程的业务分析、流程定制和流程审核过程。 视频学习:实现参数 支持 3个月、6个月和具体时间区间的选择
(本文档仅供参考) 问题 如下,在参数面板中,需要实现“选择任务时间”。当选择“3个月”时,后面的日期为3月前的日期到当天的日期范围; image2018-7-25 10:52:3.png 当选择“6个月”时,后面的日期为6月前的日期到当天的日期范围 image2018-7-25 10:53:12.png 且可以自定义具体的日期区间,进行筛选数据 image2018-7-25 10:53:42.png 解决方案 上述的需求我们可以通过构造3个参数时间。第一个参数为“选择任务时间”,控件类型为平铺面板,其值为“3个月”和“6个月”。然后构造两个日期参数,“开始日期”和“结束日期”,设置这两个参数kettle入门体验
把各种数据放到 一个壶里然后以一种指定的格式流出。 Spoon 是一个图形用户界面,它允许你运行转换或者任务,其中转换是用Pan 工具来运 行,任务是用Kitchen 来运行。Pan 是一个数据转换引擎,它可以执行很多功能,例如:从 不同的数据源读取、操作和写入数据。Kitchen 是一个可以运行利用XML 或数据资源库描述 的任务。通常任务是在规定的时间间隔内用批处理的模式自动运行。 Kettle的安装 要运行此工具你必须安装 Sun 公司的JAVA 运行环境1.4 或者更高版本,相关资源你可 以到网络上搜索JDK 进行下载,Kettle 的下载可以到http://kettle.pentaho.org/ http系统监控-实验监控
如下: 加载更多:加载更多的日志查看; 下载:下载日志:会下载最近4天的所有实验监控日志 计算任务 打开为计算引擎的监控状态界面。 详细内容 引擎资源监控包括实验监控、配置查看、环境查看等内容。 image2021-12-17_14-17-49.png 实验监控 刷新:刷新当前页面。 说明如下: 名称 说明 计算服务状态 执行引擎状态,running表示正在运行中。 最大并发数 最多能同时执行的并发数量。 等待队列长度 等待执行的个数。 最大等待队列长度 等待执行个数最多为30个。 任务监控 执行引擎监控。 实验的运行情况分为三种