2024年3月14日发(作者:)
内存映射文件 UnmapViewOfFile
MapViewOfFile
摘要: 本文给出了一种方便实用的解决大文件的读取、存储等处
理的方法,并结合相关程序代码对具体的实现过程进行了介绍。
引言
文件操作是应用程序最为基本的功能之一,Win32 API和MFC
均提供有支持文件处理的函数和类,常用的有Win32 API的
CreateFile()、WriteFile()、ReadFile()和MFC提供的CFile
类等。一般来说,以上这些函数可以满足大多数场合的要求,但
是对于某些特殊应用领域所需要的动辄几十GB、几百GB、乃至
几TB的海量存储,再以通常的文件处理方法进行处理显然是行
不通的。目前,对于上述这种大文件的操作一般是以内存映射文
件的方式来加以处理的,本文下面将针对这种Windows核心编
程技术展开讨论。
内存映射文件
内存映射文件与虚拟内存有些类似,通过内存映射文件可以保留
一个地址空间的区域,同时将物理存储器提交给此区域,只是内
存文件映射的物理存储器来自一个已经存在于磁盘上的文件,而
非系统的页文件,而且在对该文件进行操作之前必须首先对文件
进行映射,就如同将整个文件从磁盘加载到内存。由此可以看出,
使用内存映射文件处理存储于磁盘上的文件时,将不必再对文件
执行I/O操作,这意味着在对文件进行处理时将不必再为文件申
请并分配缓存,所有的文件缓存操作均由系统直接管理,由于取
消了将文件数据加载到内存、数据从内存到文件的回写以及释放
内存块等步骤,使得内存映射文件在处理大数据量的文件时能起
到相当重要的作用。另外,实际工程中的系统往往需要在多个进
程之间共享数据,如果数据量小,处理方法是灵活多变的,如果
共享数据容量巨大,那么就需要借助于内存映射文件来进行。实
际上,内存映射文件正是解决本地多个进程间数据共享的最有效
方法。
内存映射文件并不是简单的文件I/O操作,实际用到了
Windows的核心编程技术--内存管理。所以,如果想对内存映射
文件有更深刻的认识,必须对Windows操作系统的内存管理机
制有清楚的认识,内存管理的相关知识非常复杂,超出了本文的
讨论范畴,在此就不再赘述,感兴趣的读者可以参阅其他相关书
籍。下面给出使用内存映射文件的一般方法:
首先要通过CreateFile()函数来创建或打开一个文件内核对象,
这个对象标识了磁盘上将要用作内存映射文件的文件。在用
CreateFile()将文件映像在物理存储器的位置通告给操作系统后,
只指定了映像文件的路径,映像的长度还没有指定。为了指定文
件映射对象需要多大的物理存储空间还需要通过
CreateFileMapping()函数来创建一个文件映射内核对象以告诉
系统文件的尺寸以及访问文件的方式。在创建了文件映射对象后,
还必须为文件数据保留一个地址空间区域,并把文件数据作为映
射到该区域的物理存储器进行提交。由MapViewOfFile()函数负
责通过系统的管理而将文件映射对象的全部或部分映射到进程地
址空间。此时,对内存映射文件的使用和处理同通常加载到内存
中的文件数据的处理方式基本一样,在完成了对内存映射文件的
使用时,还要通过一系列的操作完成对其的清除和使用过资源的
释放。这部分相对比较简单,可以通过UnmapViewOfFile()完
成从进程的地址空间撤消文件数据的映像、通过CloseHandle()
关闭前面创建的文件映射对象和文件对象。
内存映射文件相关函数
在使用内存映射文件时,所使用的API函数主要就是前面提到过


发布评论