回答情况：
提问时间：
问题标签：
我想使用spark-redshift库通过以下代码将数据从AWS S3写入到AWS Redshift。在使用它之前，我想知道spark-redshift库是开源/免费使用的，还是必须通过Databricks获得许可。
浏览 21提问于2020-09-10得票数 0
我在Scala中有我的Spark项目，我想使用spark-redshift repo作为我的DataWarehouse，我发现Redshift是存在的，但Databricks从几年前就将其设置为私有的
浏览 48提问于2020-07-17得票数 0
我想看看是否可以使用星火结构流(v2.2)将数据流流到Redshift，我找到了spark-redshift库()。但是，它只在批处理模式下工作。对于如何处理流数据，还有其他建议吗？
浏览 5提问于2017-10-31得票数 3
回答已采纳
我正在使用Databricks spark-redshift将DataFrames写到Redshift。
浏览 0提问于2018-04-11得票数 1
我正在尝试使用spark-redshift连接器将嵌套的JSON保存到redshift
问题是redshift不接受dataframe的结构，因为它有一个数组。
浏览 2修改于2016-07-14得票数 1
回答已采纳
我正在尝试使用spark-redshift数据库包，但无法使Redshift jdbc驱动程序正常工作。我已经从下载了最新版本并保存到s3存储桶中。
浏览 8提问于2017-01-18得票数 0
回答已采纳
我也读到过spark-redshift driver是可用的，但我不想在extra JARS中运行spark-submit。
如何从Spark-shell连接到红移数据？
浏览 4提问于2018-09-12得票数 4
我正在使用spark-redshift，并使用pyspark查询红移数据进行处理。如果我使用工作台etc.But在redshift上运行这个查询，那么spark-redshift将数据卸载到s3，然后检索它，当我运行它时，它抛出以下错误。
浏览 52提问于2017-12-27得票数 2
回答已采纳
reducing to a dataframe的想法是能够将结果数据写入数据库(Redshift，使用spark-redshift包)。
浏览 2修改于2016-10-30得票数 7
回答已采纳
2.0.1"
libraryDependencies += "com.databricks" %% "spark-redshift
浏览 7提问于2016-12-02得票数 2
% sparkVersion, "com.databricks" %% "spark-redshift
浏览 2修改于2017-05-05得票数 2
回答已采纳
3回答
我尝试使用spark-redshift从redshift中读取数据，但遇到了这个错误。我已经在S3中创建了存储桶，并且我能够使用足够的凭据访问它。
浏览 1提问于2016-08-09得票数 0
Build.sbt val sparkRedshift = "io.github.spark-redshift-community" %% "spark-redshift
浏览 59提问于2022-03-02得票数 1
回答已采纳
asmaier/5768c7cda3620901440a62248614bbd0
# see https://github.com/databricks/spark-redshift
浏览 8提问于2020-07-01得票数 1
/bin/spark-submit --packages org.apache.spark:spark-streaming-kafka-0-8_2.11:2.1.0,databricks:spark-redshift
浏览 3提问于2017-01-20得票数 2
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号