内存映射（mmap）

内存映射（Memory-Mapped File,系统调用名mmap）是操作系统提供的一种机制,它将磁盘文件或匿名内存区域直接映射进程的虚拟地址空间,使程序能像访问普通内存指针那样读写文件内容,而数据的实际加载与回写由内核的分页机制透明完成。

概述

mmap是类Unix系统的核心系统调用,Windows上有对应的文件映射API。传统文件读写需经read/write系统调用,把数据从内核页缓存拷贝到用户缓冲区;而内存映射让用户空间直接访问页缓存所在的物理页,减少一次拷贝,并把文件读写融入统一的虚拟内存管理。

核心原理

• 建立映射:调用mmap后,内核在进程地址空间划出一段区域并关联到文件,此时并不立即读盘。
• 按需分页:程序首次访问某页时触发缺页中断,内核才把对应文件页载入物理内存,实现懒加载。
• 脏页回写:对映射区的写入标记为脏页,由内核在合适时机或调用同步接口时刷回磁盘。
• 共享与私有:多个进程可映射同一文件实现共享内存通信,也可选私有写时复制模式,修改互不影响原文件。

应用场景

数据库和存储引擎如LMDB、部分RocksDB场景用mmap访问数据文件,省去显式I/O。动态链接器用它加载共享库,进程间通信用匿名映射实现共享内存。处理超过内存容量的大文件时,mmap让程序无需一次性载入全部数据。

常见问题

问:mmap一定比传统读写快吗?答:不一定。它在随机访问大文件和多进程共享时优势明显,但对顺序小文件、或需要精确控制I/O时机的场景,缺页中断和页管理开销反而可能拖慢速度。

问:访问映射区时程序崩溃了会怎样?答:若访问越界或底层文件被截断,可能触发总线错误信号导致进程终止,因此使用时需谨慎处理文件大小变更等边界情况。