星星之火-SQL命令行使用对远程集群的Hive查询

Question

我试图在命令行中针对远程星火集群运行一个spark (蜂巢查询)。但我得到了“桌子找不到”后，连接到火花主人。

这就是我从$SPARK_HOME/bin尝试的

./spark-sql --jars /.../calliope-hive-assembly-1.1.0-CTP-U2-2.jar \
    /../calliope-hive_2.10-1.1.0-CTP-U2.jar  --master spark://<<master_url>>:7277 \
    --executor-memory 1000M --total-executor-cores 2 " select count(*) *****"

这就是我要得到的

查询中出现错误:找不到表：

请帮帮忙

Answer 1

这张桌子存在于蜂巢里吗？如果是，请确保您提供蜂箱配置来触发。Spark应该了解Hive元存储的详细信息，以获得表的元数据。

请查看下面的链接，了解整合。http://spark.apache.org/docs/latest/sql-programming-guide.html#hive-tables

如果这件事已经处理好了，请告诉我。如果注意到这一点，还必须有其他问题。