回答情况：
提问时间：
问题标签：
(master = master, spark_home = spark_home, spark_version = version, : > s
浏览 1修改于2020-11-01得票数 0
回答已采纳
我正在尝试在Docker上使用Zeppelin设置Spark开发环境，但我在连接Zeppelin和Spark容器时遇到了问题。command: bin/spark-class org.apache.spark.deploy.master.Master -h spark-master image: gettyimages/spark
command: bin/sp
浏览 3修改于2019-08-25得票数 2
3回答
, logging to /opt/spark/logs/spark-hduser-org.apache.spark.deploy.master.Master-1-lebron.outdoublet: &#
浏览 9提问于2016-10-19得票数 4
回答已采纳
更新：
(spark.sql.warehouse.dir，/spark.sql.warehouse.dir/tablespace/external/hive/) (spark.admin.acls，) (spark.yarn.dist.files，spark.yarn.dist.files，spark.history.kerberos.keytab (spark.history.kerberos.keytab，
浏览 0修改于2018-10-26得票数 6
','5'),('spark.yarn.executor.cores', '5'), ('spark.yarn.cores.max', '5'), ('spark.yarn.driver.memory'_conf.get('spark.driver.memory')
print 'spark.driver.cores', sc._conf
浏览 1提问于2018-08-23得票数 6
我在dataproc集群中运行下面的spark提交命令，但我注意到很少有spark配置被忽略。我想知道他们被忽视的原因是什么？=4G, spark.driver.memory=8G, spark.shuffle.service.enabled=true, spark.yarn.maxAppAttempts=1, spark.sql.shuffle.partitions=200, spark.executor.memoryOverhead=7680, spark<
浏览 44提问于2020-12-10得票数 1
回答已采纳
","3600s")spark.conf.set("spark.sql.tungsten.enabled", "true")spark.conf
浏览 0修改于2019-09-24得票数 5
spark-class org.apache.spark.deploy.master.Master
spark-class org.apache.spark.deploy.worker.Worker” –-master spark://valid ip:7077 C:\Spark2.1.1\spark-2.1.1-bin-hadoop2.7\spark-mllib-example\
浏览 8提问于2017-06-23得票数 1
groupId = org.apache.sparkversion = 2.2.0
$ bin/spark-submit --jars <spark-streaming-kafka在下一次运行时，我运行了"<em
浏览 22提问于2018-08-27得票数 6
回答已采纳
export SPARK_LAUNCH_WITH_SCALA=0exportSPARK_LIBRARY_PATH=${SPARK_HOME}/lib
export SPARK<
浏览 0修改于2015-05-22得票数 1
:spark-launcher _2.11, _2.10[error] org.json4s:json4s-ast _2.11, _2.10[error] org.apache.spark:spark-unsafe _2.11, _2.1
浏览 0提问于2017-03-11得票数 2
SKIPPED[INFO] Spark Project External Flume Sink .................._2.10: Could not resolve dependencies for project org.apache.spark:spark-assembly_2.10:pom:1.3.1: Couldnot find artifact org.apach
浏览 0提问于2015-05-16得票数 0
Spark服务是如何在我的docker-compose file中定义的 spark: environment: - SPARK_RPC_AUTHENTICATION_ENABLED=no
- SPARK_RPC_ENCRYPTION_ENABLED/s
浏览 2提问于2022-01-28得票数 0
' : '30000', 'spark.driver.cores' : '5',
浏览 4修改于2019-12-02得票数 0
我正在使用intellij项目加载Spark，但没有安装Spark。添加到spark并使用
spark.sparkContext.addJar("C:/.../spark-xml_2.10-0.2.0.jar&q
浏览 7提问于2017-12-27得票数 1
我使用我的PC作为Spark服务器，同时作为Spark Worker，使用Spark 2.3.1。
起初，我使用我的Ubuntu 16.04 LTS。一切运行正常，我尝试运行SparkPi示例(使用spark-submit和spark-shell)，它能够正常运行。/Spark/spark-2.3.1-bin-hadoop2.7/examples/jars/spark-examples_2.11-2.3
浏览 10提问于2018-09-07得票数 0
回答已采纳
我已经试图改变spark.executor.memory和spark.driver.memory，但问题不断出现。spark.network.timeout","200000s")\.conFig("spark. submit.deployMode"("spark.jars","/opt
浏览 7修改于2022-09-08得票数 0
此脚本必须从Apache Spark的可运行发行版运行。 但是所有的spark runnables都在这个目录中。spark-class spark-shell.cmd spark-sql2.cmd sparkR
beeline.cmd load-spark-env.cmdpyspark2.cmd spark-class.cmd spark-shell2.c
浏览 50提问于2020-04-08得票数 0
:spark-cassandra-connector_2.12:3.2.0添加包时，应用程序在
com.datastax.spark#spark-cassandra-connector_2.12 added/com/datastax/spark/spark-cassandra-connector_2.12/3.2.0/spark-cassandra-connector_2.12-3.2.0.pomcom.datastax.<em
浏览 11提问于2022-08-09得票数 1
回答已采纳
我有一个需要每晚运行的spark工作。然而，我不得不从1.6更新到spark 2.1。(由file:/usr/local/src/spark21master/spark-2.1.2-bin-2.7.3/jars/spark-sql_2.11-2.1.2.jar加载)从(由org.apache.spark.util.MutableURLClassLoader@ee80a89b).从file:/tmp/
浏览 58修改于2018-06-12得票数 0
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号