首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >气流上传Pandas数据到红移表

问气流上传Pandas数据到红移表
EN

Stack Overflow用户
提问于 2022-04-15 16:47:49
回答 1查看 552关注 0票数 0

我想用气流填充一个红移表。我想要插入的数据是以熊猫数据的形式出现的,尽管我可以将它写入csv或任何其他格式。

我正在查看RedshiftSQLOperator的文档,但是插入是硬编码的,我不知道是否有一种方法可以批量上传数据。

EN

回答 1

Stack Overflow用户

回答已采纳

发布于 2022-04-16 02:19:47

redshift操作符还定义了一个钩子,它允许您访问SQL - api/airflow/providers/amazon/aws/hooks/redshift/index.html#airflow.providers.amazon.aws.hooks.redshift.RedshiftSQLHook。

建议您使用熊猫to_sql函数,其中指定连接参数以实现插入。

代码语言:javascript
复制
redshift_hook = RedshiftSQLHook(...)
engine = redshift_hook.get_sqlalchemy_engine()

df.to_sql(..., conn=engine)
票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/71886717

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档