如何提交python SnappyData作业

Question

(docs/programming_guide/using_the_spark_shell_and_spark-submit.md)文档显示，可以向Spark (主默认端口7077)提交SnappyData程序，该程序可以使用SnappyData表：

$./bin/ io.snappydata.examples.AirlineDataSparkApp -提交-类io.snappydata.examples.AirlineDataSparkApp-主火花://主主机:7077-conf$SNAPPY/io.snappydata.examples.AirlineDataSparkApp/jars/Quickstart.jar

我的问题是:火花端口7077似乎没有在听。必须手动配置吗？

(假设:我假设端口7077属于SnappyData附带的Spark，而不是单独的Spark集群。)

Answer 1

是的，Snappy数据服务器JVM不能运行Python“内部”。但是，您可以使用相同的节点启动星火主和工作人员-这些都是非常轻的重量。运行与用于运行SnappyData“数据服务器”的节点并置的工作人员。请注意，无论作业(例如Java、scala)是否在数据服务器中运行，它们都需要类似的资源(CPU、内存)。