使用Marathon运行Spark作业

Question

我有一个马拉松式的工作，要做的事情如下：

./bin/spark-class org.apache.spark.deploy.mesos.MesosClusterDispatcher

但是，接下来我想使用以下命令将单个Spark作业作为单独的Marathon作业运行：

./bin/spark-submit ....

我的问题是:我如何从Mesos执行程序调用spark-submit，二进制文件没有安装在它上面？(注意:我知道http://spark.apache.org/docs/latest/running-on-mesos.html#connecting-spark-to-mesos也建议在所有Mesos从属服务器上安装Spark，但这是唯一的选择吗？)

任何指导都是非常感谢的。

Answer 1

只需运行以下命令：

/opt/spark/spark-2.1.0-bin-hadoop2.7/bin/spark-submit --class org.apache.spark.examples.SparkPi --master mesos://127.0.0.1:31258 --deploy-mode cluster --supervise --executor-memory 2G --total-executor-cores 1 /opt/spark/spark-2.1.0-bin-hadoop2.7/examples/jars/spark-examples_2.11-2.1.0.jar 1000