首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >Java:在某些情况下,磁盘和内存一样快吗?

问Java:在某些情况下,磁盘和内存一样快吗?
EN

Stack Overflow用户
提问于 2013-03-19 17:59:38
回答 2查看 194关注 0票数 4

我正在编写一些代码来访问倒置指数。我有两个可互换的类,它对索引执行读取。一个人从磁盘中读取索引,缓冲其中的一部分。另一个则将索引作为一个字节(索引大小约为7Gb)完全加载到内存中,并从这个多维数组中读取。在内存中存储整个数据时,人们会期望有更好的性能。但是我的测量表明,在磁盘上使用索引就像在内存中使用索引一样快。(在内存中加载索引所花费的时间不包括在性能中)

为什么会发生这种情况?有什么想法吗?

进一步信息:我已经运行了启用HPROF的代码。无论是“在磁盘上”还是“在内存中”,最常用的代码--它并不是与读取直接相关的代码。另外,据我(有限的)理解,gc分析器没有显示任何与gc相关的问题。

更新#1:我已经测试了我的代码来监视I/O时间。看起来,内存上的搜索大部分占用0-2000ns,而磁盘上的大部分查找占用1000-3000 of。第二个指标对我来说似乎太低了。Linux是否应该进行磁盘缓存?是否有一种方法可以排除用于基准测试的磁盘缓存?

更新2:我绘制了对索引的每个请求的响应时间图。内存和磁盘的行几乎完全匹配。我还做了一些其他测试,使用O_DIRECT标志打开文件(感谢JNA!)在这种情况下,代码的磁盘版本(显然)比内存慢。因此,我的结论是,“问题”是因为积极的Linux磁盘缓存,这是相当惊人的。

更新#3:http://www.nicecode.eu/java-streams-for-direct-io/

EN

回答 2

Stack Overflow用户

回答已采纳

发布于 2013-03-19 18:02:12

不,磁盘永远不能像RAM那样快(RAM实际上是磁盘速度的100,000倍)。很可能操作系统正在为您映射内存中的文件。

票数 2
EN

Stack Overflow用户

发布于 2013-03-19 18:02:16

我头上有三种可能性:

  • 操作系统已经通过其文件系统缓存将所有索引文件保存在内存中。(我仍然希望有一次开销,请注意。)
  • 索引不是您正在测试的代码的瓶颈。
  • 你的基准测试方法不太正确。(做好基准很难。)

在我看来,中间选择似乎是最有可能的。

票数 5
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/15507017

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档