怎么通过代码向YARN提交一个Spark job

2025-04-29 04:46:24
推荐回答(1个)
回答1:

你指的是用命令行在终端里提交?

示例如下:

$spark-submit --class SparkPi --master yarn-cluster --executor-memory 2G --num-executors 2 ./SparkTest.jar

说明:--之前都有空格,最后一个是jar包所在的路径,如果程序有参数,在最后一一列出

另外附张图

图中的 \ 是在命令行中需要回车之前加的

参考 http://blog.csdn.net/kinger0/article/details/46562473