首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >AWS粘合空值作为字符串插入到RDS上

问AWS粘合空值作为字符串插入到RDS上
EN

Stack Overflow用户
提问于 2021-10-29 21:04:28
回答 1查看 108关注 0票数 0

我创建了一个AWS glue作业,将数据从CSV文件加载到Mysql RDS数据库。数据已成功加载,但所有空值都作为字符串插入到MySQL表中,而不是作为NULL插入。

因此,如果我像select * from myTable where myCol is null这样查询我表,结果为0

但当我在这里执行select * from myTable where myCol where = 'NULL'时,我会得到结果。

有问题的字段的数据类型是字符串。

你知道怎么解决这个问题吗?

EN

回答 1

Stack Overflow用户

发布于 2021-10-30 17:10:33

对于任何感兴趣的人,我最终修改了我的pyspark脚本。

我将AWS glue作为字符串处理的所有NULL列转换为null (在Python中为None)。

代码语言:javascript
复制
import pyspark.sql.functions as f
## ...
  def convertToNull(dfa):
 for i in dfa.columns:
  dfa = dfa.withColumn(i , f.when((f.col(i) == 'NULL') | (f.col(i) == 'null'), None).otherwise(f.col(i)))
 return dfa
## .........
票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/69774750

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档