首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >如何在maven中访问Spark程序中的Hive转移?

如何在maven中访问Spark程序中的Hive转移?
EN

Stack Overflow用户
提问于 2018-09-30 09:46:02
回答 1查看 180关注 0票数 2

我用Java编写了一个maven项目,使用spark存储一些单元表。表和元空间位于eclipse工作区中的目录spark-warehousemetastore_db中。spark-warehousemetastore_db的位置是/Users/username/workspace/Spark-Hive/load/spark-warehouse/Users/username/workspace/Spark-Hive/load/metastore_db

我编写了另一个maven项目,使用以下星星之火会话访问那些单元表:

代码语言:javascript
复制
    String warehouseLocation = "/Users/username/workspace/Spark-Hive/load/spark-warehouse";
        SparkSession spark = SparkSession.builder()
                .appName("Load")
                .master("local[*]")
                .config("spark.sql.warehouse.dir", warehouseLocation)
//      .config("hive.metastore.warehouse.dir","/Users/username/workspace/Spark-Hive/load/metastore_db")
            .enableHiveSupport()
            .getOrCreate();

我能够访问我写到加载表的第一个maven项目中的表,但无法访问我的第二个maven项目中的表。我也给出了蜂巢转移到第二个程序,但没有工作。如何使用maven项目访问eclipse中的那些单元表?

EN

回答 1

Stack Overflow用户

回答已采纳

发布于 2018-09-30 12:11:13

以下列方式给出spark-warehouse路径:

代码语言:javascript
复制
String warehouseLocation = new File("/Users/username/workspace/Spark-Hive/load/spark-warehouse").getAbsolutePath();
票数 1
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/52576708

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档