我有一个MapR cluster of 10 nodes,最近进行了一些重组。基本上,在某些节点上有一些缺失的磁盘是固定的。在此之后,无法在HDFS path上找到单元目录。然而,蜂窝表和数据是完整的,这些表可以从CLI中看到。
我尝试了运行时没有任何问题的fsck,然后执行了gfsck。
下面的是gfsck:的输出
$ sudo /opt/mapr/bin/gfsck -r cluster=tmcluster1 rwvolume=users
Starting GlobalFsck:
clear-mode = false
debug-mode = false
dbcheck-mode = false
repair-mode = true
assume-yes-mode = false
cluster = tmcluster1
rw-volume-name = users
snapshot-name = null
snapshot-id = 0
user-id = 0
group-id = 0
get volume properties ...
put volume users in global-fsck mode ...
get snapshot list for volume users ...
starting phase one (get containers) for volume users(31225146) ...
got volume containers map
done phase one
starting phase two (get inodes) for volume users(31225146) ...
java.lang.Exception: ContainerGetInodes RPC retry 11
at com.mapr.fs.globalfsck.PhaseTwo$PhaseTwoThread.getInodesOfContainer(PhaseTwo.java:238)
at com.mapr.fs.globalfsck.PhaseTwo$PhaseTwoThread.run(PhaseTwo.java:154)
at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1145)
at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:615)
at java.lang.Thread.run(Thread.java:745)在蜂巢里,我只能看到桌子、结构等等,我不能再触发任何其他的DDL。例如,表上的正常计数会产生以下错误:
hive> select count(1) from table1;
2015-08-20 21:10:13,4261 ERROR JniCommon fs/client/fileclient/cc/jni_MapRClient.cc:1306 Thread: 27514 mkdirs failed for /user/mapr/tmp/hive/hive_2015-08-20_21-10-13_254_31142713538709, error 11
FAILED: RuntimeException java.io.IOException: Error: Resource temporarily unavailable(11), file: hive_2015-08-20_21-10-13_254_3114271353870903660-1, user name: mapr, ID: 5000只有一个用户,即'mapr',用于执行对单元表的所有操作。
有人对此有什么想法吗??
提前谢谢。
发布于 2015-08-24 02:36:31
CLI正在复制表详细信息,因为MetaStore DB包含所有表详细信息,以及名称位置,请检查MySQL/Posrtgress/Derby/ all中的表,使用Hive,表名类似TBLS,您将在那里看到所有MetaStore Info。
在上述情况下,正如您已经提到的那样,您不能列出所有的数据块,可能是数据块被破坏了{您已经提到}了,所以如果您已经提到},您可以调用数据,但是它的可能性很小,有些您可以尝试通过以下方法重新启动亚稳态服务。
"hive --service metastore" or "sudo service hive-metastore start" or "hive --service metastore"如果数据有复制,那么Namenode将尝试修复相同的,否则您必须重新创建表,再次重新上传数据。
如果你有其他选择,请告诉我,这样我也可以用在我的箱子里。:)
https://stackoverflow.com/questions/32133493
复制相似问题