建商城网站需要多少钱,网站被挂黑链了,网页表单制作,5G网站建设linux内核支持多种共享内存方式#xff0c;如mmap内存映射#xff0c;Posix共享内存#xff0c;以system V共享内存。当内核空间和用户空间存在大量数据交互时#xff0c;共享内存映射就成了这种情况下的不二选择。它能够最大限度的降低内核空间和用户空间之间的数据拷贝如mmap内存映射Posix共享内存以system V共享内存。当内核空间和用户空间存在大量数据交互时共享内存映射就成了这种情况下的不二选择。它能够最大限度的降低内核空间和用户空间之间的数据拷贝从而大大提高系统的性能。
共享内存是最有用也是最快的IPC方式。两个不同进程A、B共享内存时同一块物理内存被映射到进程A、B各自的进程地址空间。进程A可以即时看到进程B对共享内存中数据的更新反之亦然。由于多个进程共享同一块内存区域必然需要某种同步机制互斥锁和信号量都可以。
内存映射简而言之就是将用户空间的一段内存区域即进程地址空间的内存映射段其位于堆空间和栈空间之间映射到内核空间映射成功后用户对这段内存区域的修改可以直接反映到内核空间同样内核空间对这段区域的修改也直接反映用户空间那么对于内核空间和用户空间两者之间需要大量数据传输等操作的话效率是非常高的。对于Posix共享内存和system V共享内存一样在地址空间处于内存映射段物理内存处于内核区。因此这三种方式都不需要内核区与用户区进行数据的交换效率更高通过指针的方式可以直接对内存进行访问。对于大数据的内存访问一般来说在Linux系统中采用内存映射和共享内存是最好的方式这样对于应用层来说可以很方便的访问到内核的空间。
mmap内存映射
mmap内存映射的方式分为两种文件映射一般文件或者/dev/zero文件和匿名映射。文件映射是指该地址空间内存映射段的内容来自于一个文件而匿名映射地址空间背后什么靠山都没有。进程的代码段来自于镜像采用文件映射方式而栈堆.bss段数据段均是匿名映射。
下图是文件映射的示意图映射文件的一部分 off为偏移大小len为映射区的大小。
mmap函数是unix和类unix下的系统调用其系统调用接口为void *mmap(void *addr, size_t length, int prot, int flags,int fd, off_t offset); mmap内存映射的作用有二1.用于共享内存完成IPC2.提供了不同于一般访问文件的方式如系统函数read和write等、C库函数printf、scanf等由于其不需要内核空间与用户空间的数据拷贝因此效率会更高。使得访问文件类似于直接访问内存一样直接用指针就可以操作文件。而Posix或system V的共享内存IPC则纯粹用于共享目的当然mmap实现共享内存也是其主要应用之一。
mmap内存映射并不分配空间只是将文件映射到调用进程的地址空间里但是会占掉你的 virutal memory然后你就可以用memcpy等操作写文件而不用write了。写完后内存中的内容并不会立即更新到文件中而是有一段时间的延迟你可以调用msync来显式同步一下, 这样你所写的内容就能立即保存到文件里了。不过通过mmap来写文件这种方式没办法增加文件的长度因为要映射的长度在调用mmap的时候就决定了。
在内存映射的过程中并没有实际的数据拷贝文件没有被载入内存只是逻辑上被放入了地址空间的内存映射段。在用指针实际访问的时候逻辑地址加上基地址形成的线性地址经过MMU映射成为物理地址此时会检测到访问的文件不在内存从而通过缺页中断请求的方式才将其调入内存并同时修改页表和快表此时才真正调入到内存。即MMU完成了地址的变换变换后的信息存储在PCB中、缺页中断、调页请求等。缺页中断的中断响应函数会在swap中寻找相对应的页面如果找不到也就是该文件从来没有被读入内存的情况则会通过mmap建立的映射关系从硬盘上将文件读取到物理内存中。如果在拷贝数据时发现物理内存不够用则会通过虚拟内存机制swap将暂时不用的物理页面交换到硬盘上。
比较mmap、C库函数、系统函数、管道和消息队列
用户进程通过系统调用访问系统资源如访问文件时需要切换到内核态而这对应一些特殊的堆栈和内存环境必须在系统调用前建立好。在系统调用后CPU会从内核态转换到用户态而堆栈又必须恢复成用户进程的上下文这种切换会消耗大量的系统时间。在用户态不仅仅是系统资源位于其它进程空间的资源都是看不到的透明的因此在切换到用户态时需要将系统调用访问的资源拷贝到用户空间才能被用户空间进行操作用户态是没有权限对内核进行操作的。
read、write等系统函数访问文件时都是先将外部设备上的数据读到内核缓冲区然后将内核的数据交到用户缓冲区然后用户进程就可以通过用户缓冲区来使用这些数据了。printf等C库函数一样它们的唯一区别就是C库函数有自己维护的I/O缓冲区8KB而系统函数需要自己指定缓冲区buff。C库函数对文件的访问最终也是通过read和write等系统函数来完成的。但由于其I/O缓冲区无缓冲、行缓冲和全缓冲比较大因此较少了内核与用户的交互次数从而一般比系统函数访问速度会更快但是系统函数可以通过指定buff的大小大于I/O缓冲区的大小使其效率比C库函数更高它们的原理一样的。 综上内核缓冲区是为了减少操作磁盘等外部设备的次数缓解CPU的速度与外部设备速度之间的不匹配而I/O缓冲区是为了减少系统调用的次数。
采用共享内存通信的一个显而易见的好处是效率高因为进程可以直接读写内存而不需要任何数据的拷贝。对于像管道和消息队列等通信方式则需要在内核和用户空间进行四次的数据拷贝读文件read、再write到管道一端、再从管道另一端read、最后再write到外部文件而共享内存则只拷贝两次数据。一次从输入文件到共享内存区另一次从共享内存区到输出文件。实际上进程之间在共享内存时并不总是读写少量数据后就解除映射有新的通信时再重新建立共享内存区域。而是保持共享区域直到通信完毕为止这样数据内容一直保存在共享内存中并没有写回文件。共享内存中的内容往往是在解除映射时才写回文件的。因此采用共享内存的通信方式效率是非常高的。
内核将硬盘文件的内容直接映射到内存, 任何应用程序都可通过Linux的mmap()系统调用请求这种映射。内存映射是一种方便高效的文件I/O方式 因而被用于装载动态共享库。如C标准库函数fread、fwrite、fopen等和Linux系统I/O函数它们都是动态库函数其中C标准库函数都被封装在了/lib/libc.so库文件中都是二进制文件。这些动态库函数都是与位置无关的代码即每次被加载进入内存映射区时的位置都是不一样的因此使用的是其本身的逻辑地址经过变换成线性地址虚拟地址然后再映射到内存。而静态库不一样由于静态库被链接到可执行文件中因此其位于代码段每次在地址空间中的位置都是固定的。
system V共享内存
共享内存就是多个进程的地址空间映射到同一个物理内存多个进程都能看到这块物理内存共享内存可以提供给服务器进程和客户进程之间进行通信不需要进行数据的复制所以速度最快。
共享内存操作需要的函数
1.我们需要利用ftok函数生成key标识符。
key_t ftok(const char *pathname,int proj_id)
2.使用shmgt函数创建一个共享内存块返回这个共享内存块的标识符shmid。
int shmget(key_t key,size_t size,int shmflg);
size是需要申请的共享内存的大小需要注意的是操作系统为你提供的大小的时候是按页来提供所以size为4k的整数倍shmflg如果要创建新的共享内存那么就使用IPC_CREAT,IPC_EXCL,如果是已经存在的那么只需要使用IPC_CREAT。
3.用shmat挂接共享内存将进程地址空间挂接到共享内存共享内存是物理空间可以有多个挂接
void *shmat(int shmid,const void *shmaddr, int shmflg);
shmid是挂接的进程号shmaddr置为NULL让系统选择一个合适的地址空间进行挂接shmflg表示什么方式进行挂接一般都是取0函数返回各个进程挂接的虚拟的地址空间。
4.用shmdt去挂接。
int shmdt(const void *shmaddr);
5.用shmctl销毁共享内存
int shmctl(int shmid,int cmd,struct shmid_ds *buf);
cmd取IPC_RMID表示删除这块共享内存buf一般设置为NULL不关心这个东西消息队列中也有这么一个类似的结构体也是设置为NULL。
共享内存与mmap内存映射的区别
首先说明相同点都可以进行进程之间的通信。
mmap还可以提供非文件进行访问的操作访问文件就像访问内存一样可以用指针直接对文件进行操作但是速度还是不一样毕竟mmap最终还是访问的是磁盘文件。
mmap和shm
1.mmap是在磁盘上建立一个文件每个进程地址空间中开辟出一块空间进行映射。而对于shm而言shm每个进程最终会映射到同一块物理内存。shm保存在物理内存这样读写的速度要比磁盘要快但是存储量不是特别大。
2.相对于shm来说mmap更加简单调用更加方便所以这也是大家都喜欢用的原因。
3.另外mmap有一个好处是当机器重启因为mmap把文件保存在磁盘上这个文件还保存了操作系统同步的映像所以mmap不会丢失但是shmget就会丢失。
