更改HBase WAL位置

Question

我计划将HBase与gs://方案(google buckets)一起使用，但是gs:// fs不能处理WAL文件。

Cause:
java.io.IOException: cannot get log writer
Caused by: java.io.IOException: createNonRecursive unsupported for this filesystem class com.google.cloud.hadoop.fs.gcs.GoogleHadoopFileSystem

正如我所发现的，它应该是将WAL文件与HBase根目录分开存储的方法，例如：https://docs.aws.amazon.com/emr/latest/ReleaseGuide/images/hbase_s3.png

所以，我的问题是-如何分离数据文件和WAL文件。要将数据存储在gs://中，将WAL存储在hdfs://中...不幸的是我自己还是找不到它。

非常感谢你提前

Answer 1

当前稳定版本不支持将WAL存储在hbase.rootdir之外的其他位置。它计划在未来的版本中，参考https://issues.apache.org/jira/browse/HBASE-17437