给星火节约服务器到仓库目录的路径

Question

我已经设置了我的火花集群，我成功地连接了Tableau通过spark连接器。

我使用shell创建了我的表，并使用MySQL (saveAsTable)保存了数据格式。

如何访问我从Tableau中保存的表？启动星火节约服务器时，是否需要给出仓库目录的路径？如果是，如何才能做到，如果不是，如何才能做到这一点？

Answer 1

确保您是指向相同的亚稳态火花壳和 thriftserver。 元存储共享可以有两种方式，很简单

1. 从同一地点启动外壳和节约
2. 建立亚稳态远程数据库

您可以使用--hiveconf将蜂箱甜点传递给火花放电服务器，用--conf传递Spark

./sbin/start-thriftserver.sh \
  --conf spark.sql.warehouse.dir=path/to/warehouse/dir \
  --hiveconf hive.server2.thrift.port=<listening-port> \
  --hiveconf hive.server2.thrift.bind.host=<listening-host> \
  --master <master-uri>
  ...