回答情况：
提问时间：
问题标签：
请问spark-operator怎么指定调度器，在sparkapplication里的driver字段下通过schedulerName标签指定，没生效
浏览 273提问于2021-09-07
我正在为Kubernetes使用spark-operator。我想知道启用历史服务器(到s3a://)和spark-operator的最佳方式。 另外，如何在s3a://中存储每个作业的驱动程序/执行器的stdout和stderr日志。
浏览 13提问于2020-07-28得票数 1
v1beta2-1.2.1-3.0.0 spark-operator/spark-operator --namespace spark-operator6 --create-namespace
kubectl/spark-operator:v1beta2-1.3.1-3.1.1 -另一个！未能提取图像"gcr.io/spark-operator/spark-operator:v1beta2-1.3.1-3.1.1"：rpc错误:代码=未知的des
浏览 13提问于2022-01-21得票数 1
回答已采纳
看起来spark-operator应该启用webhooks才能工作。使用。deployment.apps/spark-operatorGenerateName:"", Namespace:"", Self
浏览 3提问于2020-11-20得票数 0
以下是我的错误：
status: [ContainerStatus(containerID=null, image=gcr.io/spark-operator/spark:v2.4.5, imageIDrunning=null, terminated=null, waiting=ContainerStateWaiting(message=Back-off pulling image "gcr.io/spark-operatorcontainerID=docker://7b46d9483cf2
浏览 6修改于2020-02-11得票数 0
我的entrypoint.sh但当我运行码头时，它会记录：
[FATAL tini (6)] tcsetpgrp
浏览 0修改于2019-10-22得票数 1
---- ---- ------- Warning SparkApplicationSubmissionFailed 5s spark-operatorfailed to submit SparkApplication spark-pi: failed to run spark-submit for
浏览 15提问于2021-10-06得票数 1
我是spark-operator的新手，我很困惑如何在YAML文件中设置资源请求和限制。例如，在我的例子中，我请求512m的内存用于驱动程序包，但是限制呢，它是无界的？
浏览 1提问于2020-05-04得票数 1
为此，我使用如下所示的Dockerfile构建了一个映像：kind: SparkApplication name: simple-spark-etl-job
namespace: spark-operator
浏览 4提问于2022-01-31得票数 0
sparkoperator.k8s.io/v1beta2"metadata: namespace: spark-operatorspec: mode: cluster imagePullPolicy:
浏览 7提问于2020-07-16得票数 1
在任何给定的时间点，度量kube_pod_status_phase{namespace="spark-operator"，phase=" failed "}给出了所有处于失败状态的豆荚的列表。
浏览 3提问于2020-07-13得票数 1
我的Dockerfile如下FROM ${SPARK_IMAGE}
RUN apk --update
浏览 17提问于2019-11-05得票数 1
回答已采纳
prometheus: port: 8888
如spark-operator
浏览 1修改于2021-10-05得票数 1
spark.executor.instances=2 --conf spark.kubernetes.container.image=gcr.io/spark-operator
浏览 0修改于2020-01-25得票数 0
以下是消息：ARG spark_image=gcr.io/spark-operator/spark:v2.4.4
RUN
浏览 6修改于2020-04-23得票数 0
SparkApplication name: spark-examplespec: image: gcr.io/spark-operator
浏览 0提问于2018-12-26得票数 0
回答已采纳
我在的K8上安装了Spark，我注意到示例中使用了图像gcr.io/spark-operator/spark:v3.0.0。
浏览 3修改于2020-09-11得票数 2
),)
dockerBaseImage := "gcr.io/spark-operator
浏览 44提问于2020-07-18得票数 2
回答已采纳
java.lang.ClassNotFoundException:
Class org.apache.hadoop.fs.s3a.S3AFileSystem not found 我首先尝试使用gcr.io/spark-operator
浏览 58修改于2020-07-24得票数 3
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号