《Linux中C库mmap()函数详解》

简介:
 Linux的mmap系统调用(libc封装了同名函数)可以分配一段匿名的虚拟内存区域,也可以映射一个文件到内存。
 mmap()必须以PAGE_SIZE为单位进行映射,而内存也只能以页为单位进行映射,若要映射非PAGE_SIZE整数倍的地址范围,要先进行内存对齐,强行以PAGE_SIZE的倍数大小进行映射。
 mmap操作提供了一种机制,让用户程序直接访问设备内存,这种机制,相比较在用户空间和内核空间互相拷贝数据,效率更高。在要求高性能的应用中比较常用。
 面向流的设备不能进行mmap,mmap的实现和硬件有关。
函数定义:
 #include <sys/mman.h>

void *mmap(void *start, size_t length, int prot, int flags, int fd, off_t offset);
 int munmap(void *start, size_t length);

函数形式参数:
 start:映射区的开始地址,设置为0时表示由系统决定映射区的起始地址。
 length:映射区的长度。
 prot:期望的内存保护标志,不能与文件的打开模式冲突。是以下的某个值,可以通过or运算(“|”)合理地组合在一起
  PROT_EXEC //页内容可以被执行
  PROT_READ //页内容可以被读取
  PROT_WRITE //页可以被写入
  PROT_NONE //页不可访问
 flags:指定映射对象的类型,映射选项和映射页是否可以共享。它的值可以是一个或者多个以下位的组合体
  MAP_FIXED //使用指定的映射起始地址,如果由start和len参数指定的内存区重叠于现存的映射空间,重叠部分将会被丢弃。如果指定的起始地址不可用,操作将会失败。
     //并且起始地址必须落在页的边界上。
  MAP_SHARED //与其它所有映射这个对象的进程共享映射空间。对共享区的写入,相当于输出到文件。直到msync()或者munmap()被调用,文件实际上不会被更新。
  MAP_PRIVATE //建立一个写入时拷贝的私有映射。内存区域的写入不会影响到原文件。这个标志和以上标志是互斥的,只能使用其中一个。
  MAP_DENYWRITE //这个标志被忽略。
  MAP_EXECUTABLE //同上
  MAP_NORESERVE //不要为这个映射保留交换空间。当交换空间被保留,对映射区修改的可能会得到保证。当交换空间不被保留,同时内存不足,对映射区的修改会引起段违例信号。
  MAP_LOCKED //锁定映射区的页面,从而防止页面被交换出内存。
  MAP_GROWSDOWN //用于堆栈,告诉内核VM系统,映射区可以向下扩展。
  MAP_ANONYMOUS //匿名映射,映射区不与任何文件关联。
  MAP_ANON //MAP_ANONYMOUS的别称,不再被使用。
  MAP_FILE //兼容标志,被忽略。
  MAP_32BIT //将映射区放在进程地址空间的低2GB,MAP_FIXED指定时会被忽略。当前这个标志只在x86-64平台上得到支持。
  MAP_POPULATE //为文件映射通过预读的方式准备好页表。随后对映射区的访问不会被页违例阻塞。
  MAP_NONBLOCK //仅和MAP_POPULATE一起使用时才有意义。不执行预读,只为已存在于内存中的页面建立页表入口。
 fd:有效的文件描述词。一般是由open()函数返回,其值也可以设置为-1,此时需要指定flags参数中的MAP_ANON,表明进行的是匿名映射。
 offset:被映射对象内容的起点。

函数返回值: 
 成功执行时,mmap()返回被映射区的指针,munmap()返回0。失败时,mmap()返回MAP_FAILED[其值为(void *)-1],munmap返回-1。
 errno被设为以下的某个值:
  EACCES:访问出错
  EAGAIN:文件已被锁定,或者太多的内存已被锁定
  EBADF:fd不是有效的文件描述词
  EINVAL:一个或者多个参数无效
  ENFILE:已达到系统对打开文件的限制
  ENODEV:指定文件所在的文件系统不支持内存映射
  ENOMEM:内存不足,或者进程已超出最大内存映射数量
  EPERM:权能不足,操作不允许
  ETXTBSY:已写的方式打开文件,同时指定MAP_DENYWRITE标志
  SIGSEGV:试着向只读区写入
  SIGBUS:试着访问不属于进程的内存区

系统调用:
 mmap()系统调用使得进程之间通过映射同一个普通文件实现共享内存。普通文件被映射到进程地址空间后,进程可以向访问普通内存一样对文件进行访问,不必再调用read(),write()等操作。
 注:实际上,mmap()系统调用并不是完全为了用于共享内存而设计的。它本身提供了不同于一般对普通文件的访问方式,进程可以像读写内存一样对普通文件的操作。
     而Posix或SystemV的共享内存IPC则纯粹用于共享目的,当然mmap()实现共享内存也是其主要应用之一。 
 
 系统调用mmap()用于共享内存的两种方式: 
  (1)使用普通文件提供的内存映射:适用于任何进程之间;此时,需要打开或创建一个文件,然后再调用mmap();典型调用代码如下: 
   fd=open(name, flag, mode); 
   if(fd<0) 
   ... 
   ptr=mmap(NULL, len , PROT_READ|PROT_WRITE, MAP_SHARED , fd , 0);
   通过mmap()实现共享内存的通信方式有许多特点和要注意的地方,我们将在范例中进行具体说明。 
  (2)使用特殊文件提供匿名内存映射:适用于具有亲缘关系的进程之间;由于父子进程特殊的亲缘关系,在父进程中先调用mmap(),然后调用fork()。
       那么在调用fork()之后,子进程继承父进程匿名映射后的地址空间,同样也继承mmap()返回的地址,这样,父子进程就可以通过映射区域进行通信了。
       注意,这里不是一般的继承关系。一般来说,子进程单独维护从父进程继承下来的一些变量。而mmap()返回的地址,却由父子进程共同维护。 
       对于具有亲缘关系的进程实现共享内存最好的方式应该是采用匿名内存映射的方式。此时,不必指定具体的文件,只要设置相应的标志即可。

int munmap( void * addr, size_t len ) 
 该调用在进程地址空间中解除一个映射关系,addr是调用mmap()时返回的地址,len是映射区的大小。当映射关系解除后,对原来映射地址的访问将导致段错误发生。

int msync ( void * addr , size_t len, int flags) 
 一般说来,进程在映射空间的对共享内容的改变并不直接写回到磁盘文件中,往往在调用munmap()后才执行该操作。可以通过调用msync()实现磁盘上文件内容与共享内存区的内容一致。

程序例:
 下面将给出使用mmap()的两个范例。范例1给出两个进程通过映射普通文件实现共享内存通信,范例2给出父子进程通过匿名映射实现共享内存。
 系统调用 mmap()有许多有趣的地方,下面是通过mmap()映射普通文件实现进程间的通信的范例,我们通过该范例来说明mmap()实现共享内存的特点及注意事项。

范例1:两个进程通过映射普通文件实现共享内存通信 
 范例1包含两个子程序:map_normalfile1.c及map_normalfile2.c。编译两个程序,可执行文件分别为 map_normalfile1及map_normalfile2。
 两个程序通过命令行参数指定同一个文件来实现共享内存方式的进程间通信。 map_normalfile2试图打开命令行参数指定的一个普通文件,把该文件映射到进程的地址空间,并对映射后的地址空间进行写操作。
 map_normalfile1把命令行参数指定的文件映射到进程地址空间,然后对映射后的地址空间执行读操作。这样,两个进程通过命令行参数指定同一个文件来实现共享内存方式的进程间通信。
 下面是两个程序代码: 
  /*-------------map_normalfile1.c-----------*/ 
  #include <sys/mman.h> 
  #include <sys/types.h> 
  #include <fcntl.h> 
  #include <unistd.h> 
  
  typedef struct{ 
   char name[4]; 
   int age; 
  }people; 
  
  main(int argc, char** argv) // map a normal file as shared mem: 
  { 
   int fd,i; 
   people *p_map; 
   char temp; 
   
   fd = open(argv[1],O_CREAT|O_RDWR|O_TRUNC,00777); 
   
   if(fd < 0)
   {
    printf("error open\n");
    exit(1);
   }
   
   lseek(fd,sizeof(people)*5-1,SEEK_SET); 
   write(fd,"",1); 
   p_map = (people*) mmap( NULL,sizeof(people)*10,PROT_READ|PROT_WRITE,MAP_SHARED,fd,0 );
   close( fd ); 
   temp = 'a'; 
   for(i=0; i<10; i++) 
   { 
    temp += 1; 
    memcpy( ( *(p_map+i) ).name, &temp,2 ); 
    ( *(p_map+i) ).age = 20+i; 
   } 
   
   printf(" initialize over \n "); 
   sleep(10); 
   munmap( p_map, sizeof(people)*10 ); 
   printf( "umap ok \n" ); 
  }

/*-------------map_normalfile2.c-----------*/ 
  #include <sys/mman.h> 
  #include <sys/types.h> 
  #include <fcntl.h> 
  #include <unistd.h> 
  typedef struct{ 
   char name[4]; 
   int age; 
  }people;

main(int argc, char** argv) // map a normal file as shared mem: 
  { 
   int fd,i; 
   people *p_map; 
   fd=open( argv[1],O_CREAT|O_RDWR,00777 ); 
   p_map = (people*)mmap(NULL,sizeof(people)*10,PROT_READ|PROT_WRITE,MAP_SHARED,fd,0);
   for(i = 0;i<10;i++) 
   { 
    printf( "name: %s age %d;\n",(*(p_map+i)).name, (*(p_map+i)).age ); 
   } 
   munmap( p_map,sizeof(people)*10 ); 
  } 
  
 map_normalfile1.c 首先定义了一个people数据结构,(在这里采用数据结构的方式是因为,共享内存区的数据往往是有固定格式的,这由通信的各个进程决定,采用结构的方式有普遍代表性)。
 map_normfile1打开或创建一个文件,并把文件的长度设置为5个people结构大小。然后从mmap()的返回地址开始,设置了10个people结构。
 然后,进程睡眠10秒钟,等待其他进程映射同一个文件,最后解除映射。 
 map_normfile2.c只是简单的映射一个文件,并以people数据结构的格式从mmap()返回的地址处读取10个people结构,并输出读取的值,然后解除映射。
  
 分别把两个程序编译成可执行文件map_normalfile1和map_normalfile2后,在一个终端上先运行./map_normalfile2 /tmp/test_shm,程序输出结果如下:
  initialize over 
  umap ok 
 在map_normalfile1输出initialize over 之后,输出umap ok之前,在另一个终端上运行map_normalfile2 /tmp/test_shm,将会产生如下输出(为了节省空间,输出结果为稍作整理后的结果):
  name: b age 20; name: c age 21; name: d age 22; name: e age 23; name: f age 24;
  name: g age 25; name: h age 26; name: I age 27; name: j age 28; name: k age 29;
 在map_normalfile1 输出umap ok后,运行map_normalfile2则输出如下结果: 
  name: b age 20; name: c age 21; name: d age 22; name: e age 23; name: f age 24;
  name: age 0; name: age 0; name: age 0; name: age 0; name: age 0; 
 从程序的运行结果中可以得出的结论 :
  1、 最终被映射文件的内容的长度不会超过文件本身的初始大小,即映射不能改变文件的大小; 
  2、可以用于进程通信的有效地址空间大小大体上受限于被映射文件的大小,但不完全受限于文件大小。
     打开文件被截短为5个people结构大小,而在 map_normalfile1中初始化了10个people数据结构,在恰当时候(map_normalfile1输出initialize over 之后,输出umap ok之前)调用map_normalfile2
     会发现map_normalfile2将输出全部10个people结构的值,后面将给出详细讨论。 
     注:在linux中,内存的保护是以页为基本单位的,即使被映射文件只有一个字节大小,内核也会为映射分配一个页面大小的内存。
         当被映射文件小于一个页面大小时,进程可以对从mmap()返回地址开始的一个页面大小进行访问,而不会出错;
         但是,如果对一个页面以外的地址空间进行访问,则导致错误发生,后面将进一步描述。因此,可用于进程间通信的有效地址空间大小不会超过文件大小及一个页面大小的和。
  3、文件一旦被映射后,调用mmap()的进程对返回地址的访问是对某一内存区域的访问,暂时脱离了磁盘上文件的影响。所有对mmap()返回地址空间的操作只在内存中有意义,
     只有在调用了munmap()后或者msync()时,才把内存中的相应内容写回磁盘文件,所写内容仍然不能超过文件的大小。

https://blog.csdn.net/as_fan/article/details/8003100

mmap()、munmap()的用法、例子相关推荐

  1. mmap/munmap函数详解

    [ mmap/munmap系统调用]        功能描述: mmap将一个文件或者其它对象映射进内存.文件被映射到多个页上,如果文件的大小不是所有页的大小之和,最后一个页不被使用的空间将会清零.m ...

  2. Python中threading的join和setDaemon的区别及用法 例子

    Python中threading的join和setDaemon的区别及用法 Python多线程编程时,经常会用到join()和setDaemon()方法,今天特地研究了一下两者的区别. 1.join ...

  3. javawhile语句的用法例子_Python语句之循环

    不论什么编程语言,第一次学习都会讲到"hello world",都会讲到循环.同样在python的世界中也是有循环的.当然在我们的系统业务流程上也是可以有循环存在的,比如重复添加数 ...

  4. linux库函数mmap()原理及用法详解

    目录 1.mmap基本概念 2.mmap内存映射原理 3.mmap和常规文件操作的区别 4.mmap优点总结 目录 1. 内存映射的概念 2. mmap基本概念 3. mmap相关函数 3.2 参数说 ...

  5. linux 高级IO函数之fcntl mmap/munmap

    fcntl函数提供了对文件描述符的各种控制操作.另外一个常见的控制文件描述符属性和行为的系统调用是ioctl,而且ioctl比fcntl能够执行更多的控制.但是对于控制文件描述符常用的属性和行为,fc ...

  6. mmap函数的用法详解及实例分析

    1.mmap函数是一个比较神奇的函数,它可以把文件映射到进程的虚拟内存空间.通过对这段内存的读取和修改,可以实现对文件的读取和修改,而不需要用read和write函数.如下图所示,为mmap实现原理的 ...

  7. c语言结构体的用法例子,c语言 结构体 入门

    在说结构体之前,我们先来看看类型和变量 比如 int a; int是类型名,a是变量名 变量名是我们自己定义的,可以改成其他名字,但是int,char这些类型名是不能修改的 而结构体可以让我们自己定义 ...

  8. 【web】特效 阴影(用法+例子)

    阴影 用法: box-shadow box-shadow: 5px 5px 5px tomato; 第一个参数:横向偏移量,向右偏移正数,向左偏移负数 第二个参数:纵向偏移量,向下偏移正数,向上偏移负 ...

  9. thymleaf用法例子

    学习视频:https://www.bilibili.com/video/BV1gW411W76m?t=1978&p=31 之前的网页开发.为了进行数据交互.必须整成jsp页面!然而,sprin ...

  10. JAVA中throw用法例子,Java Optional orElseThrow()用法及代码示例

    Java中的java.util.Optional类的orElseThrow()方法用于获取此Optional实例(如果存在)的值.如果此Optional实例中不存在任何值,则此方法将引发从指定供应商生 ...

最新文章

  1. Qt4在linux下的安装
  2. 一条长度为l的笔直街道 java_如图,在一条笔直的东西向海岸线l上有一长为1.5km的码头MN和灯塔C,灯塔C距...
  3. MYSQL数据库字母数字混合字段排序问题
  4. Failed to resolve: com.android.support:appcompat-v7:27.+ 报错解决方法
  5. myeclipse连接hadoop集群编程及问题解决
  6. 高级T-SQL第1级的阶梯:使用交叉连接来引入高级T-SQL
  7. 编造机中鼠标无法应用标题问题解答
  8. linux mxnet 查询_mxnet c_predict_api的Go绑定实现 – go-mxnet-predi...
  9. 美国迈阿密市民工资将可以通过BTC支付
  10. 【读书笔记】—— 《从 0 到 1》
  11. 日历 C语言算法,【求助】万年历算法
  12. 天使投资,众筹与项目背书
  13. python工资条教程_这才是史上最简单的工资条制作方法
  14. 130个Photoshop经典合成教程
  15. 设置页眉页脚--分节符
  16. Ubuntu18状态栏调整位置,放置在屏幕下方
  17. /var/lib/docker/overlay2 占用很大,docker数据目录迁移
  18. bzoj3165 [Heoi2013]Segment
  19. 技能大赛计算机主板维修报表,2017年职业院校技能大赛高职组电子产品芯片级检测维修与数据恢复赛项样题...
  20. 全天50个亮星排行表

热门文章

  1. SAP ERP 与 Oracle ERP 比较
  2. 树莓派 小车java_树莓派小车之前进和后退(创乐博套件)
  3. Spring Security 记住我功能原理以及实现
  4. 常见的shell介绍(与bash功能类似的应用程序有哪些)
  5. 今天发现易宝(yeepay)充值卡类支付方式可能存在的安全漏洞!
  6. Codeforces 1287C Garland
  7. Xv6学习之kinit1
  8. 深度学习评估指标之目标检测——(yolov5 可视化训练结果以及result.txt解析)
  9. 3 个技巧教你轻松查看多开模拟器的端口号~
  10. SQL Server视频总结(一):SQL Server概述