回答情况：
提问时间：
问题标签：
我希望使用spark-jobserver的一个实例来管理此环境的一般作业master，并且能够在我POST /jobs时指定目标JAR，而不是永久地在配置文件中(使用master = "local[4]显然，我更喜欢在一台独立的机器上运行spark-jobserver，而不是在任何masters上。
这有没有可能呢？
浏览 0提问于2016-02-05得票数 0
那么，使用Apache Livy而不是spark-jobserver有什么好处呢？使用Livy作为替代的spark-jobserver的缺点是什么？我在网上找不到太多关于这个的信息。
浏览 4提问于2018-02-19得票数 18
未解析的依赖关系: com.ning#async-http-client;1.8.10: org.sonatype.oss#oss-parent;9!oss-parent.pom(pom.original)源位置必须是绝对的:文件：at sbt.IvyActions$$anonfun$updateEither$1.apply(IvyActions.scala:191)
at sbt.IvyActions$$anonfun$updateEither$1.apply(
浏览 0提问于2016-12-10得票数 1
我想同时使用mllib和spark-jobserver，但我得到了一个错误(在spark-jobserver中，当一个作业被发送时)。spark.jobserver.JobManagerActor$$anonfun$spark$jobserver$JobManagerActor$$getJobFuture$4.apply(JobManagerActor.scala:234)
我使用的是spark-jobserver
浏览 5修改于2015-04-30得票数 1
classOf[CqlOutputFormat], ) } 当我使用spark-jobServer推送Jar并执行它时，我在spark-jobserver终端上得到以下代码
job-server[ERROR] Exception in thread "pool-1-thread-1" java.lang.NoClassDefFoundError
浏览 8提问于2015-04-24得票数 2
当我同时发布jobserver请求时，它们似乎总是以FIFO模式进行处理。尽管我尽了最大的努力来启用公平调度程序，但这还是存在的。如何确保始终并行处理我的请求？直觉上，我预计会发生以下情况(参见下面的配置)：上下文在公平的池中运行。每次用户发送处理某些数据的请求时，Spark都应该拆分公平池，并提供一部分集群资源来处理新的请求。然后，每个请求都以FIFO模式与任何其他并发请求并行运行。
下面是我同时运行作业时实际发
浏览 17提问于2016-08-25得票数 2
<repositories> <id>spark-jobserver</id> </repository>
<
浏览 2提问于2016-12-01得票数 0
回答已采纳
我得到了编译错误：[error] /spark-jobserver/job-server-extras/src/main/java/spark/jobserver/JHiveTestLoaderJob.javaerror] location: package org.apache.spark.sql[error] /spark-jobserverconver
浏览 1提问于2017-03-15得票数 2
回答已采纳
]$ sbt ashesh-jobs/package[info] scalastyleusing config
浏览 4提问于2016-05-26得票数 1
vagrant@cassandra-spark:~/spark-jobserver$ sudo sbtMissing bintray credentials /root/.bintray/.credentials.[info] Set current project to root (in build file:/h
浏览 2提问于2015-06-12得票数 1
回答已采纳
我可以使用jar -cxf命令扩展/解压缩jar "result": "Jar is not of the right format"
curl --data-binary /opt/hadoop&#x
浏览 0提问于2015-11-06得票数 4
-bash-4.2$ dse spark-jobserver start
/usr/share/dse/spark/spark-jobserver/server_start.sh: line 82: /
浏览 2修改于2016-06-02得票数 1
jobdao = spark.jobserver.io.JobSqlDAO
rootdir = /tmp/spark-jobserver/filedao/data}
rootdir = /tmp/spark-jobserver/upload slick-driver= slick.driver.H2Driver
jdbc-driver = o
浏览 3提问于2016-12-13得票数 1
我正在尝试在码头容器中部署spark-jobserver实例并将其连接到BlueMix Spark服务。
浏览 0提问于2015-12-02得票数 2
回答已采纳
我看到了一个替代方案，Spark-JobServer，它提供了一个RESTful接口来做这件事，但我的Spark应用程序是用Java或R编写的，这似乎与Spark-JobServer不能很好地接口。
浏览 6提问于2015-03-26得票数 5
我已经查看了Spark-Jobserver，但看起来需要将其部署在\n Ec2实例中，但我希望使用Spark REST interface.Please建议使用AWS Lambda函数提交作业。
浏览 1提问于2017-09-25得票数 1
Worker.run(ThreadPoolExecutor.java:617)
at java.lang.Thread.run(Thread.java:745) https://github.com/spark-jobserver/spark-jobserver/pull/1058。我是否应该在提交作业时包含任何额外的道具，如CONTEXT_ID，因为这只在SJS 0.9.0中添加，并且我已经通过了此内容https://github.com/spark-
浏览 17提问于2019-04-11得票数 0
回答已采纳
anon$8.run(Scheduler.scala:375)", "java.lang.Thread.run(Thread.java:745)"]我还尝试将/usr/local/hadoop/spark-jobserver版本信息[info] Set current project to spark-jobserver(in build file:/usr&#
浏览 2修改于2016-05-19得票数 0
中添加了作业服务器0.9.0依赖项 scalaVersion := "2.11.0""org.apache.spark" %% "spark-sql" % "2.3.2",
) 但是，当我尝试像这样测试代码时(从
浏览 19修改于2019-06-19得票数 0
回答已采纳
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号