首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >当数据驻留在HDFS(HFile)上时,HFile读取的性能如何?

当数据驻留在HDFS(HFile)上时,HFile读取的性能如何?
EN

Stack Overflow用户
提问于 2019-06-10 02:09:25
回答 1查看 636关注 0票数 1

如我们所知,当内存存储中的数据达到阈值时,内存存储中的数据将作为HFile被刷新到HDFS。

当我想通过行键获取数据,但数据在HDFS上时,HBase如何保证检索速度(或随机访问速度)?看起来比从内存存储中检索要慢得多?

EN

回答 1

Stack Overflow用户

回答已采纳

发布于 2019-06-11 21:55:30

来自HBase 参考指南

HBase提供了两种不同的BlockCache实现来缓存从HDFS读取的数据:默认的堆上LruBlockCacheBucketCache,后者通常是堆外的. LruBlockCache是最初的实现,完全在Java堆中。BucketCache是可选的,主要用于使块缓存数据远离堆.

HBase还收集块缓存统计数据,并通过其web显示它们。通过适当的调整,你可以达到90%-95%的命中率,所以大部分时间你仍然在记忆中阅读。

票数 1
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/56519775

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档