java中磁盘和内存的相互,Java:有没有磁盘和内存一样快的情况?
我正在写一些代码来访问inverted index.
我有两个可互换的类,它们对索引执行读操作.一个从磁盘读取索引,缓冲其中的一部分.另一个将索引完全加载到内存中,作为byte [] [](索引大小约为7Gb)并从此多维数组中读取.
人们期望在将整个数据存储在内存中时具有更好的性能.但我的措施表明,使用磁盘上的索引,它与内存中的索引一样快.
(在内存中加载索引所花费的时间不计入表演中)
为什么会这样?有任何想法吗?
更多信息:我已经运行了启用HPROF的代码.两者都在“磁盘上”或“在内存中”工作,最常用的代码不是与读取直接相关的代码.此外,对于我(有限)的理解,gc探查器不会显示任何与gc相关的问题.
更新#1:我已经检测了我的代码来监控I / O次数.似乎大多数内存搜索需要0-2000ns,而磁盘上的大部分搜索需要1000-3000ns.第二个指标对我来说似乎有点太低了.它是由于Linux的磁盘缓存吗?有没有办法排除磁盘缓存以进行基准测试?
更新#2:我已经绘制了每个索引请求的响应时间.内存和磁盘的行几乎完全匹配.我已经使用O_DIRECT标志进行了一些其他测试来打开文件(感谢JNA!),在这种情况下,代码的磁盘版本(显然)比内存慢.所以,我得出的结论是“问题”是因为积极的Linux磁盘缓存,这是非常了不起的.
解决方法:
不,磁盘永远不会像RAM一样快(RAM实际上是磁盘速度快100,000倍).操作系统很可能是为您准备内存中的文件.
标签:java,io,bigdata
来源: https://codeday.me/bug/20190613/1229754.html
java中磁盘和内存的相互,Java:有没有磁盘和内存一样快的情况?相关推荐
- Java中的Volatile如何工作? Java中的volatile关键字示例
如何在Java中使用Volatile关键字 在Java采访中,什么是volatile变量以及何时在Java中使用volatile变量是Java 采访中一个著名的多线程采访问题 . 尽管许多程序员都知道 ...
- java 中的排序_浅谈java中常见的排序
浅谈java中常见的排序 学过java的人都知道,排序这一部分初次接触感觉还是有点难以理解,很多地方也会用到.然而,在java中常见的排序方法:冒泡排序,选择排序,插入排序等等.下面就让我们一起揭开他 ...
- java数组硬盘读取,java中如何通过IO流将稀疏数组写入磁盘和从磁盘中读取,整行存,整行取...
匿名用户 1级 2019-06-13 回答 //写入磁盘 public static void writ(int sparseArr[][]) { System.out.println("写 ...
- Java中基本数据类型和引用数据类型存放的位置(栈内存和堆内存)
1.基本数据类型 java中的基本数据类型可以在栈中直接分配内存,它有以下八种: boolean,byte,char,short,int,long,float,double 2.引用数据类型 除了基本 ...
- 1、Java中“并发编程”详解【voliate、synchronized、JMM内存模型、原子类操作Atomic..、CAS原理】
文章目录 1.对volatile 的理解? JMM(Java 内存模型) JMM模型的三大特性: 禁止指令排序 线程安全性保证 你在哪些地方用到过 volatile?单例 2.CAS 你知道吗?CAS ...
- java中字符流 字节流_理解Java中字符流与字节流的区别
1. 什么是流 Java中的流是对字节序列的抽象,我们可以想象有一个水管,只不过现在流动在水管中的不再是水,而是字节序列.和水流一样,Java中的流也具有一个"流动的方向",通常可 ...
- java中引用类型_您真的了解Java中的4种引用类型吗?
Java中提供了四个级别的引用:SoftReference,FinalReference,WeakReference和PhantomReference.在四种引用类型中,只有FinalReferenc ...
- java中布局管理器flowlayout,在Java中下列()方法可以把JFrame的布局管理器设为FlowLayout类型。...
在Java中下列()方法可以把JFrame的布局管理器设为FlowLayout类型. 答:jFrame.setLayout(new FlowLayout() ) 在Word 2010的编辑状态,当前编 ...
- java中序列化怎么创建_【java】面试官问我,如何实现一个自定义序列化
通常离开内存的东西,如果需要存储或传输是需要序列化的,在java中要序列化是要实现Serializable的(或其子类),那不实现Serializable,如何实现一个自定义的序列化呢,我首先想到的是 ...
最新文章
- 原理+代码实战 | 双目视觉中的极线校正
- MongoDB 访问控制
- AI应用开发实战(转)
- u-boot.lds文件简介
- Yet Another Array Partitioning Task CodeForces - 1114B(思维)
- 801. Minimum Swaps To Make Sequences Increasing
- java is instance of_详谈Java中instanceof和isInstance的区别
- iOS 混合开发 —— 方案分析
- 【元胞自动机】基于matlab元胞自动机四车道交通流【含Matlab源码 039期】
- Microsoft Windows Sharepoint Services V3.0 安装图示
- 【GD32F310开发板试用】利用I2C接口通过温湿度传感器HDC1080读取当前环境温湿度
- odoo社区版审批流
- java.util.Date中的loe_有趣的widget-日期和时间
- 成为一名合格Android架构师,移动APP开发框架盘点,面试资料分享
- 蔬菜迎八方宾朋,共享科技盛宴
- 《就这样享用word》word实用技巧总结-更新中
- Unity UI Text组件添加contentsizefitter后获取RectTransform宽度
- Marathon+Mesos+Docker实战
- FS9017R.是一款单节4.2V锂电池充电管理IC
- 七夕送什么给女朋友好?2022年送女朋友的七夕礼物推荐