腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
搜索
关闭
文章
问答
(9)
视频
开发者手册
清单
用户
专栏
沙龙
全部问答
原创问答
Stack Exchange问答
更多筛选
回答情况:
全部
有回答
回答已采纳
提问时间:
不限
一周内
一月内
三月内
一年内
问题标签:
未找到与 相关的标签
筛选
重置
1
回答
如何在
spark-jdbc
应用程序中提供表名来读取RDBMS数据库中的数据?
我正在尝试使用spark读取greenplum数据库上的一个表,如下所示:当我使用spark-submit运行代码时,我得到了一个异常:在<code>D2</code>中,我可以看到模式名和表名的格式正确。当我提交代码时,它显示为<code>D3</code>。我不明白为什么使用<code>D4</code>作为模式名,使用查询<code>D5</code>作为表名。 谁能让我知道我在
浏览 12
修改于2018-12-20
得票数 1
1
回答
如果列的数据类型是:partitionColumn,有没有办法在
Spark-JDBC
的“option(”partitionColumn“,”colname“)”中定义“partitionColumn”?
我正在尝试将数据从RDBMS加载到HDFS上的hive表。我以如下方式读取RDBMS表: .format("jdbc") .option("dbtable", "select * from dev.userlocations") .option("password", pwd) .option("numPartitio
浏览 1
修改于2018-09-27
得票数 0
1
回答
从星火中的DataFrame中筛选和选择数据
我正在开发一个Spark程序,到目前为止,我想出了以下代码: var conf = new SparkConf().setAppName("
Spark-JDBC
") Logger.getLogger("org").setLevel(Level.ERROR
浏览 0
提问于2018-07-24
得票数 1
1
回答
如何使用JDBC连接工作?
我刚开始使用Spark,我正在尝试使用一个
spark-jdbc
程序来计算数据库中的行数。我想出了这样的代码: var conf = new SparkConf().setAppName("
Spark-JDBC
") Logger.getLogger("org").setLevel(Level.ER
浏览 0
修改于2018-07-24
得票数 0
回答已采纳
2
回答
如何在星火-jdbc连接中操作numPartitions、lowerBound、upperBound?
为此,我提出了以下代码: var conf = new SparkConf().setAppName("
Spark-JDBC
").set("spark.network.timeout","12000s").set("spark.default.parallelism", "20") val log = LogManager.getLogger("
Spark-JDBC
浏览 0
修改于2018-07-25
得票数 2
回答已采纳
1
回答
在spark-submit期间找不到org.postgresql.Driver的驱动程序异常
import org.apache.spark.SparkConf var conf = new SparkConf().setAppName("
Spark-JDBC
浏览 0
修改于2018-07-23
得票数 0
0
回答
在Scala SBT项目上加载属性文件时未找到文件异常
import org.apache.spark.SparkConf var conf = new SparkConf().setAppName("
Spark-JDBC
浏览 2
修改于2018-07-22
得票数 0
回答已采纳
1
回答
当foldLeft应用于dataFrame时,如何理解输出数据?
我就是这样写逻辑的: var conf = new SparkConf().setAppName("
Spark-JDBC
").set("spark.executor.heartbeatInterval
浏览 0
修改于2018-08-27
得票数 1
回答已采纳
3
回答
如何优化从JDBC源迁移数据时的分区?
为此,我提出了以下代码: val conf = new SparkConf().setAppName("
Spark-JDBC
").set("spark.executor.heartbeatInterval
浏览 0
修改于2018-11-22
得票数 14
回答已采纳
领券