腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
搜索
关闭
文章
问答
(24)
视频
开发者手册
清单
用户
专栏
沙龙
全部问答
原创问答
Stack Exchange问答
更多筛选
回答情况:
全部
有回答
回答已采纳
提问时间:
不限
一周内
一月内
三月内
一年内
问题标签:
未找到与 相关的标签
筛选
重置
3
回答
如何使用
Spark2.4.4
使用delta创建表?
这里是星火2.4.4和德尔塔湖0.5.0。下面的CREATE TABLE USING delta运行良好,但insertInto失败了。create table t5LOCATION '/tmp/delta' scala> spark.catalog.li
浏览 4
提问于2019-12-31
得票数 11
回答已采纳
1
回答
BinaryClassificationMetrics中
Spark2.4.4
度量属性的错误
我试图复制这个,但是当我试图从处理的.csv文件中提取一些度量时,我得到了一个错误。val splitSeed = 5043.setMaxIter(10).setElasticNetParam(0.8) val model =
浏览 3
提问于2020-01-10
得票数 0
回答已采纳
1
回答
将空数据存储到拼花中会导致错误-
Spark2.4.4
我有一段代码,在代码的最后,我写的数据文件。df.write.format("parquet").mode("overwrite").save(somePath) 当我打印"df“模式时,我得到了下面的内容。res2: org.apache.spark.sql.types.Struct
浏览 1
修改于2019-11-22
得票数 0
回答已采纳
3
回答
用
Spark2.4.4
和Scala实现Emr的S3访问错误
我试图使用Scala代码访问星火上的S3文件,并获得以下错误 val hadoopConf = sparkContext.hadoopConfiguration hadoopConf.set("fs.s3.impl", "org.apache.hadoop.fs.s3native.NativeS3FileSystem") hadoopConf.set("fs.s3.awsAccessKey
浏览 4
提问于2020-03-28
得票数 0
1
回答
当主服务器是k8s时,
Spark2.4.4
是否支持转发委托令牌?
目前,我正在为使用Kubernetes中的Livy提交Spark建立一个Kerber化环境。 当我试图从执
浏览 0
修改于2019-12-10
得票数 0
回答已采纳
3
回答
我在命令提示符中得到了这个错误,“shell”不被识别为一个内部或外部命令、可操作的程序或批处理文件。
我已经在我的windows (64位系统)的C:\驱动器中安装了Java8,
Spark2.4.4
。根据我收到的安装文件,我已经完成了所有的安装。
浏览 3
提问于2019-11-14
得票数 1
回答已采纳
2
回答
火花2.4.4。图书馆发行java.lang.NoSuchMethodError
当我们尝试在
Spark2.4.4
和Scala2.11的新版本上使用相同的代码时,我们得到了如下错误: org.apache.spark.sql.execution.datasources.FilePartition.files
浏览 1
修改于2020-02-13
得票数 0
1
回答
对象中没有属性“map”错误的pyflem2.4.4中的
我正在使用python2.7运行
Spark2.4.4
,IDE是py魅力。.ʽ|!
浏览 2
提问于2019-09-22
得票数 0
回答已采纳
1
回答
无法将coldStartStrategy设置为pyspark.mllib.recommendation.ALS模型
我使用的是吡火花(
Spark2.4.4
),我试图为ALS推荐模型使用coldStartStrategy选项,但这对我不起作用。
浏览 12
修改于2020-04-14
得票数 0
回答已采纳
1
回答
如果数组列中存在值,则筛选行
注意:我在
Spark2.4.4
工作col1 ['{"key1": "val1"}','{"key2":
浏览 8
提问于2022-05-12
得票数 0
回答已采纳
2
回答
Spark DataFrame重新分区,数值列未按预期工作
我使用的是
spark2.4.4
。我知道df.repartition(n,col1)是基于col1的散列分区的。那么为什么它在数值列上失败了?
浏览 1
提问于2019-11-16
得票数 1
1
回答
BROADCASTJOIN提示不适用于PySpark SQL
t.serial_id = c.serial_id').explain()注意: 表的大小在KBs (测试数据)连接列'serial_id‘不分区列中使用胶水目录作为亚稳态(AWS)Spark版本-
Spark2.4.4
浏览 2
提问于2020-06-28
得票数 1
回答已采纳
1
回答
使用H2O创建RSparkling上下文时出错
我使用Yarn运行
Spark2.4.4
,并使用RSparkling和Sparklyr进行接口 安装了最新版本的
浏览 9
修改于2022-03-25
得票数 0
回答已采纳
1
回答
AWS :设置S3桶访问的hadoop凭据提供程序
我已经在AWS上建立了一个星火EMR集群(Hadoop2.8.5,
Spark2.4.4
)。我有一个s3桶url,它是访问凭据。
浏览 3
修改于2020-05-19
得票数 0
2
回答
在数据库中挂载的.flow_from_directory桶上使用keras的s3 ()
我正在使用
Spark2.4.4
和python中的Scala2.11后端在databricks中构建一个卷积神经网络。我已经建立了CNN之前,但这是我第一次使用星火(数据库)和AWS s3。
浏览 2
提问于2020-04-06
得票数 0
1
回答
如何在UDF中使用scala.xml.transform.RuleTransformer?(给出scala.MatchError: scala.xml.Node)
我正在使用Scala2.12.10和
Spark2.4.4
。
浏览 10
修改于2019-11-05
得票数 1
回答已采纳
2
回答
由于“未能运行命令/usr/bin/virtualenv (.)”,AWS EMR吡火花笔记本会失败
关于集群设置的技术信息: 安装的应用程序是"Ganglia 3.7.2,
Spark2.4.4
,Zeppelin 0.9.0,Livy 0.6.0,JupyterHub 1.0.0
浏览 1
修改于2020-04-07
得票数 2
回答已采纳
2
回答
电火花电子病历和外部蜂箱/胶水--可以通过sqlContext丢弃但不能创建表。
运行于: emr-5.28.0,Hadoop发行版Amazon2.8.5
Spark2.4.4
Hive 2.3.6 Livy 0.6.0 (用于笔记本,但我的实验是通过ssh和pyspark shell
浏览 4
提问于2020-10-22
得票数 0
回答已采纳
1
回答
为什么我在使用范围连接提示时会得到异常?
更新1我想我错过了这些参数应该是可迭代的,所以我再试一次,用events.hint("range_join
浏览 0
修改于2019-12-13
得票数 5
回答已采纳
1
回答
使用火花魔术将aws emr群集附加到远程jupyter笔记本上
我已经用Hive 2.3.6,Pig 0.17.0,Hue 4.4.0,Livy 0.6.0,
Spark2.4.4
启动了一个集群,子网是公开的。
浏览 2
修改于2021-01-09
得票数 2
第 2 页
领券