Linux下如何获取内存映射文件的视图及切换后续视图？

一、用多次mmap()实现分块视图（替代Windows的MapViewOfFile） #

Linux没有专门的MapViewOfFile函数，但可以通过多次调用mmap()并指定不同的文件偏移量实现分块映射视图的效果。核心逻辑：

• 每次映射文件的一段（比如你说的10MB），处理完成后用munmap()释放当前映射，再映射下一段。
• 注意：mmap()的offset参数必须是系统页大小的整数倍（可通过sysconf(_SC_PAGE_SIZE)获取页大小），否则调用会失败。

示例代码（只读顺序访问4GB大文件）：

#include <stdio.h>
#include <stdlib.h>
#include <sys/mman.h>
#include <sys/stat.h>
#include <fcntl.h>
#include <unistd.h>
#include <errno.h>
#include <sys/types.h>

#define VIEW_SIZE (10 * 1024 * 1024) // 10MB 视图块大小

int main() {
    int fd = open("large_4gb_file", O_RDONLY);
    if (fd == -1) { perror("open"); exit(1); }

    struct stat file_stat;
    if (fstat(fd, &file_stat) == -1) { perror("fstat"); close(fd); exit(1); }
    off_t total_size = file_stat.st_size;
    size_t page_size = sysconf(_SC_PAGE_SIZE);

    off_t current_offset = 0;
    while (current_offset < total_size) {
        // 计算当前块的实际长度（最后一块可能不足10MB）
        size_t block_len = (current_offset + VIEW_SIZE > total_size) ? 
                          (total_size - current_offset) : VIEW_SIZE;
        // 将偏移对齐到页大小（mmap要求offset必须是页的整数倍）
        off_t aligned_offset = current_offset & ~(page_size - 1);
        // 计算需要映射的总长度：从对齐偏移到当前块末尾
        size_t map_len = (current_offset + block_len) - aligned_offset;

        // 映射当前文件块
        void *map_addr = mmap(NULL, map_len, PROT_READ, MAP_PRIVATE, fd, aligned_offset);
        if (map_addr == MAP_FAILED) { perror("mmap"); close(fd); exit(1); }

        // 获取实际要处理的内存起始地址（跳过对齐多出的部分）
        char *data_ptr = (char*)map_addr + (current_offset - aligned_offset);

        // --------------------------
        // 这里写你的数据处理逻辑（顺序访问data_ptr指向的block_len字节）
        // --------------------------

        // 释放当前映射，回收内存和地址空间
        if (munmap(map_addr, map_len) == -1) { perror("munmap"); close(fd); exit(1); }

        current_offset += block_len;
    }

    close(fd);
    return 0;
}

二、减少页错误的实用技巧 #

你担心的“每4096字节触发一次页错误”可以通过以下方式缓解：

• 内核预读提示：在映射后调用posix_fadvise()告诉内核你要顺序访问这段文件，内核会提前批量加载后续页面，大幅减少页错误次数。比如在处理数据前加上：

  posix_fadvise(fd, current_offset, block_len, POSIX_FADV_SEQUENTIAL);
  

• 使用更大的映射块：比如你选的10MB块，内核会一次性预读更多页，而不是每次只加载4k，自然减少页错误的触发频率。

三、关于mprotect()的使用误区 #

mprotect()只能修改已映射内存区域的访问权限（比如设为PROT_NONE禁止访问），但它无法将新的文件区域映射到内存中。如果只是为了让之前的视图不可访问，用mprotect()不如直接munmap()高效——后者会彻底释放内存和地址空间，让系统可以重新利用这些资源，而mprotect()只是锁死权限，内存仍被占用。

所以不要用mprotect()来切换视图，正确的方式是munmap()当前块后重新mmap()下一块。

内容的提问来源于stack exchange，提问作者RTC222