页面树结构
转至元数据结尾
转至元数据起始

正在查看旧版本。 查看 当前版本.

与当前比较 查看页面历史

« 前一个 版本 2 下一个 »

数据挖掘包含两大部分:数据挖掘执行引擎、数据挖掘服务引擎

数据挖掘执行引擎:

  • 负责接收smartbi 发送执行请求。
  • 通过解析执行定义,生成spark 计算任务或python计算任务,分别发送给spark集群或python集群。
  • 本身并不承担计算任务,只负责计算任务的调度跟分发。

数据挖掘服务引擎:

  • 提供模型预测服务给第三放系统调用

文档环境

集群部署数据挖掘组件环境如下:

服务器IP主机名组件实例部署目录
10.10.35.6410-10-35-64数据挖掘-1,Zookeeper-1,Python-1/data
10.10.35.6510-10-35-65数据挖掘-2,Spark-1,Hadoop-1/data
10.10.35.6610-10-35-66Spark-2,Zookeeper-2,Hadoop-2/data
10.10.35.6710-10-35-67Spark-3,Zookeeper-3Hadoop-3,Python-2/data
  • 无标签