spark sql权限被拒绝user=anonymous

Question

当被拒绝的用户是匿名用户时，为Spark SQL返回的错误：

src:hdfs://ournamenode:8020/tmp/hive/spark-root_hive_2017-02-24_00-40-48_944_8869995689545229744-1/-ext-10000/load_date=20170223/part-07262, dest: hdfs://ournamenode:8020/user/hive/warehouse/p13n.db/message_viewed_new/load_date=20170223/part-07262, Status:true
chmod: changing permissions of 'hdfs://ournamenode:8020/user/hive/warehouse/p13n.db/message_viewed_new/load_date=20170223/part-07262': Permission denied. user=anonymous is not the owner of inode=part-07262

有什么地方可以解决这个问题吗？

Answer 1

我假设您正在使用beeline来运行查询。一种修复方法是使用-n选项指定用户名。

导致此权限拒绝问题的问题是，"spark-warehouse“目录是在”匿名“用户下创建的，而此目录中的文件是在运行beeline命令的用户下创建的。