首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >为什么我不能连接到蜂巢亚稳态?

为什么我不能连接到蜂巢亚稳态?
EN

Stack Overflow用户
提问于 2021-05-30 16:09:01
回答 1查看 532关注 0票数 2

因此,我在我的项目中使用了gcloud dataprocHiveSpark,但显然无法连接到Hive metastore

我正确地填充了表,所有数据都在那里,例如,我现在试图访问的表是图像上的下一个表,正如您可以看到的那样,拼花文件就在那里(存储为拼花)。Sparktp2-mdataproc cluster的主人。

接下来,我有一个关于IntelliJ的项目,它会有一些查询,但是首先我需要访问这个hive数据,它不太顺利。我试着像这样访问它:

代码语言:javascript
复制
SparkSession spark = SparkSession
            .builder()
            .appName("Check")
            .config("hive.metastore.uris","thrift://hive-metastore:9083")
            .enableHiveSupport()
            .getOrCreate();

    JavaPairRDD<Tuple2<Object, String>, Integer> mr = spark.table("title_basics_parquet").toJavaRDD()...

接下来,我构建了jar并将其作为这样的作业发送:

代码语言:javascript
复制
gcloud dataproc jobs submit spark --jars target/GGCD_Spark-1.0-SNAPSHOT.jar --class parte1.Queries --cluster sparktp2 --region europe-west1

错误是:

我是不是遗漏了什么,还是错了URI

EN

回答 1

Stack Overflow用户

回答已采纳

发布于 2021-05-30 23:22:34

默认的Hive Metastore thrift://<master-node-hostname>:9083

票数 1
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/67763255

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档