代码之家 › 专栏 › 技术社区 › Rob

随机访问多个文件和文件缓存

operating-system file-io caching

-3

Rob · 技术社区 · 16 年前

这与一些我被赋予“修复”功能的软件有关。最简单和最快速的解决方案是打开和读取数百个随机文件中的10个,提取一些非常短的字符串进行处理,然后立即关闭它们。另一个过程可能就在这之后出现,对不同或相同的随机文件执行相同的操作,这可能在几秒钟内发生数百次。

我知道现代操作系统将这些文件保存在内存中,这样磁盘抖动就不会像过去那样成为一个问题,但是我正在寻找关于如何确定打开/关闭许多随机文件何时会成为一个问题的任何文章或讨论。

1 回复 | 直到 16 年前

David Schmitt 16 年前

当工作集(所有进程读取的数据量)超过可用RAM时,吞吐量将趋向于底层磁盘的I/O容量。

从您对工作负载的描述来看,查找时间比数据传输率更为重要。

当您的工作集大小保持在您拥有的RAM数量以下时,操作系统将保持所有数据缓存,并且在缓存填满后不需要转到磁盘。

推荐文章

Todd · 创建Powershell脚本,检查.csv文件中每行是否有两个字符串和一个整数

1 年前

Kominops · C增量++意外结果

1 年前

user23819755 · 从文件加载的数据未按正确顺序返回

1 年前

Grekys · C数组元素全部变为相同值

2 年前

Deba · 为什么在cin语句中打印空格时,第0个字符没有打印出来?

2 年前

catodd · C-试图将整数和结构数组存储到二进制文件中

2 年前

vijay shankar · 有没有一种好的方法可以将二进制数据的文字写入文件?

2 年前

heapyams · Java可执行文件无法读取资源文件夹[重复]

2 年前

MtLeftovers · 将对象列表保存到py中的文件并从中加载?我甚至不知道从哪里开始

2 年前

Community wiki · 在文件中插入值

2 年前