文章/答案/技术大牛

发布

社区首页 >问答首页 >提交火花作业不是装载火花-云:2.0.0-s_2_11包

问提交火花作业不是装载火花-云:2.0.0-s_2_11包
EN

Stack Overflow用户

提问于 2016-12-02 07:53:09

回答 1查看 90关注 0票数 0

我正在使用下面的命令提交火种，

/spark提交--cloudant包-实验室:spark:2.0.0-s_2.11-class spark.cloudant.connecter.cloudantconnecter -master local* spark.cloudant.connecter.cloudantconnecter

但似乎“火花云”包没有装载。它可能不是装载，因为工件位于星火包存储库(https://dl.bintray.com/spark-packages/maven/)

，那么在命令中需要什么更改才能加载包呢？

此包的详细信息如下所示：2.11

apache-spark

apache-spark-sql

cloudant

回答 1

Stack Overflow用户

回答已采纳

发布于 2016-12-02 12:20:35

在加载包时，似乎需要使用submit命令添加存储库，

-储存库网址

所以新的命令将是，

./spark提交--cloudant包-实验室:spark:2.0.0-s_2.11 --repositories https://dl.bintray.com/spark-packages/maven/ --class spark.cloudant.connecter.cloudantconnecter -master local* /opt/demo/sparkScripts/ScoredJob/sparkcloudantconnecter.jar

票数 2

页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持

原文链接：

https://stackoverflow.com/questions/40927252

复制

相似问题

问提交火花作业不是装载火花-云:2.0.0-s_2_11包
EN

回答 1

Stack Overflow用户

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐

问提交火花作业不是装载火花-云:2.0.0-s_2_11包EN

回答 1

Stack Overflow用户

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐

问提交火花作业不是装载火花-云:2.0.0-s_2_11包
EN