首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >为什么将数据集保存到Impala并将其重新加载不会产生任何行?

为什么将数据集保存到Impala并将其重新加载不会产生任何行?
EN

Stack Overflow用户
提问于 2017-12-12 18:24:49
回答 1查看 306关注 0票数 1
  1. 从Impala表中创建 sql_df1 =hive_context.sql(“从数据库1中选择*表1限制为10")

1.1此数据返回行计数10,并显示正确的数据: sql_df1

代码语言:javascript
复制
    print(sql_df1.count())
    sql_df1.show()
  1. 从第一个火花dataframesql_df1.write.mode("overwrite").format("parquet").saveAsTable("database1.table2")创建一个新表
  2. 刷新黑斑羚中的元数据,在色调中我可以看到数据库1。表2有10行正确的数据
  3. 使用新表创建新的火花数据格式。 sql_df2 =hive_context.sql(“从数据库1.表2限制10中选择*”)
  4. 问题:新的sql_df2没有行,只有标题。 打印(sql_df2.count()) sql_df2.show()
EN

回答 1

Stack Overflow用户

回答已采纳

发布于 2017-12-13 18:59:54

我发现了问题,格式必须是“蜂巢”,而不是地板。

票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/47779171

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档