...
代码块 |
---|
./spark-submit --class org.apache.spark.examples.SparkPi --master spark://Spark-MasterIP:7077 /data/spark-3.0.0-bin-hadoop3.2/examples/jars/spark-examples_2.12-3.0.0.jar 100 |
运行得出圆周率Pi的近似值3.14即部署成功。
2.6
...
注意 | ||
---|---|---|
| ||
Smartbi配置Spark信息时,需要确保Smartbi能正常连接数据挖掘引擎。如下图 |
配置spark计算节点,打开系统运维–数据挖掘配置–执行引擎--计算节点配置,参考下图设置,修改完成后点击保存
配置Spark节点资源,点击一键推荐,系统会根据Spark work节点的服务器资源,生成推荐的配置(如果使用推荐值,记得点击保存,否则配置不生效):
配置完成后可参考: 测试数据挖掘集群 运行数据挖掘实验
...
运维操作
登陆10-10-35-65(Master)节点操作。
...