一、进程通信基础
1.什么是进程通信
进程是一个独立的资源分配单元,不同进程(这里所说的进程通常指的是用户进程)之间的资源是独立的,没有关联,不能在一个进程中直接访问另一个进程的资源。但是,进程不是孤立的,不同的进程需要进行信息的交互和状态的传递等,因此需要进程间通信( IPC:Inter Processes Communication )。
进程间通信的目的:
1.数据传输:一个进程需要将它的数据发送给另一个进程
2.通知事件:一个进程需要向另一个或一组进程发送消息,通知其发生了某件事(如子进程终止需要通知父进程)
3.资源共享:多个进程之间共享同样的资源。
4.进程控制:有些进程希望完全控制另一个进程的运行(如DEBUG),此时控制进程希望能够拦截另一个进程的所有陷入和异常。
2.进程间通信方式分类
二、管道通信
1.匿名管道通信
1.概念
管道也叫无名(匿名)管道,它是是 UNIX 系统 IPC(进程间通信)的最古老形式, 所有的 UNIX 系统都支持这种通信机制。统计一个目录中文件的数目命令:ls | wc –l,为了执行该命令,shell 创建了两 个进程来分别执行 ls 和 wc。
2.(匿名)管道特点
1.管道其实是一个在内核内存中维护的缓冲器,这个缓冲器的存储能力是有限的,不同的 操作系统大小不一定相同。
2.管道拥有文件的特质:读操作、写操作,匿名管道没有文件实体,有名管道有文件实体, 但不存储数据。可以按照操作文件的方式对管道进行操作。
3.一个管道是一个字节流,使用管道时不存在消息或者消息边界的概念,从管道读取数据 的进程可以读取任意大小的数据块,而不管写入进程写入管道的数据块的大小是多少。
4.通过管道传递的数据是顺序的,从管道中读取出来的字节的顺序和它们被写入管道的顺 序是完全一样的。
5.在管道中的数据的传递方向是单向的,一端用于写入,一端用于读取,管道是半双工的。
6.从管道读数据是一次性操作,数据一旦被读走,它就从管道中被抛弃,释放空间以便写 更多的数据,在管道中无法使用 lseek() 来随机的访问数据。
7.匿名管道只能在具有公共祖先的进程(父进程与子进程,或者两个兄弟进程,具有亲缘 关系)之间使用。
8.管道的数据结构是逻辑上的环形队列,由读指针和写指针操作
3.匿名管道相关指令和匿名管道创建
ulimit -a//查看管道缓冲区大小命令 long fpathconf(int fd, int name); //查看管道缓冲大小函数 //name为可选宏参数 _PC_PIPE_BUF //为查看缓冲大小
这里缓冲区大小为8块512字节,一共4096字节。
创建匿名管道
/* #include <unistd.h> int pipe(int pipefd[2]); 作用:创建一个匿名管道用作进程间的通信, 参数: int pipefd[]数组为传出参数(即函数存),存放两个文件描述符 pipefd[0]对应管道读端 pipefd[1]对应管道写端 返回值: -成功:0 -失败:-1 #########匿名管道只能在有亲缘关系的进程中通信 #########管道默认是阻塞的,若管道无数据,read阻塞,若管道已满,write阻塞 */ #include <sys/types.h> #include <unistd.h> #include <sys/wait.h> #include <stdlib.h> #include<stdio.h> #include<string.h> //子进程发送数据给父进程,父进程读取到数据进行输出 int main(){ //在父子进程创建之前创建管道 int pipefd[2]; int pipefd1[2]; int ret = pipe(pipefd); int ret1 = pipe(pipefd1); if(ret==-1||ret1==-1){ perror("pipe"); exit(0); } pid_t pid; pid = fork(); //父进程 if(pid>0){ printf("i am parent pid:%d\n", getpid()); char buf[1024] = {0}; while(1){ //父进程管道1读取,管道2写入 int len = read(pipefd[0], buf, sizeof(buf)); printf("parent recive : %s, pid:%d\n", buf, getpid()); char * str = "hello, i am parent"; write(pipefd1[1], str, strlen(str)); sleep(1); } } //子进程 else if(pid==0){ printf("i am child pid:%d\n", getpid()); char buf[1024] = {0}; while(1){ //子进程管道1写入,管道2读取 char * str = "hello, i am child"; write(pipefd[1], str, strlen(str)); sleep(1); int len = read(pipefd1[0], buf, sizeof(buf)); printf("child recive : %s, pid:%d\n", buf, getpid()); } } return 0; }
4.匿名管道读写特点
使用管道时,需注意(假设都是在I/O阻塞操作)
1.所有的写端都关闭了(管道写端引用计数为0),有进程从管道的读端读数据,那么管道中剩余的数据被读取后,再次读取就会返回0,就像已经读到了末尾一样
2.如果写端没有全关闭(管道写端引用计数大于0),而持有管道写端的进程没有向管道中写数据,这时候有进程从管道中读取数据,此时会阻塞,直到写端写入数据
3.如果读端都关闭了(管道读端引用计数为0),此时有进程向管道写数据,那么该进程会收到信号SIGPIPE,通常会导致进程异常终止
4.如果读端没有全关闭(管道读端引用计数大于0),此时写入数据会阻塞,直到读端读取数据
总结:
读:
管道中有数据:read实际读到的
管道中无数据:
写端全部关闭,read返回0
写端有未关闭,read阻塞等待
写:
管道读端全关闭,进程会异常终止(进程受到SIGPIPE信号)
管道读端没有全部关闭:
管道已满,阻塞
管道未满,进行写入
2.有名管道通信
有名管道(FIFO)与匿名管道大部分特点一致,除了:
1.FIFO在文件系统中作为一个特殊文件存在,但 FIFO中的内容却存放在内存中。
2.当使用FIFo的进程退出后,FIFO文件将继续保存在文件系统中以便以后使用。
3.FIFO有名字,不相关的进程可以通过打开有名管道进行通信。
2.1 有名管道的创建
创建有名管道文件fifo:
1.通过命令mkfifo name
/* 创建有名管道文件fifo: 1.通过命令mkfifo name 2.通过函数int mkfifo(const char *pathname, mode_t mode); #include <sys/types.h> #include <sys/stat.h> int mkfifo(const char *pathname, mode_t mode); -作用:创建有名管道文件 -参数: -pathname:管道路径名称 -mode:同open函数的mode,设定管道文件的权限(,8进制,注意与掩码反码按位与) -返回值: 成功:0 失败:-1 */ #include <sys/stat.h> #include <sys/types.h> #include <unistd.h> #include <sys/wait.h> #include <stdlib.h> #include<stdio.h> #include<string.h> int main(){ //判断文件是否存在 int ret1 = access("fifo1",F_OK); if(ret1==-1){ printf("文件不存在,创建"); int ret = mkfifo("fifo1", 0664); if(ret == -1){ perror("mkfifo"); exit(0); } } return 0; }
2.2 有名管道的通信
/* 向有名管道写数据 */ #include <sys/stat.h> #include <sys/types.h> #include <unistd.h> #include <sys/wait.h> #include <stdlib.h> #include<stdio.h> #include <fcntl.h> #include<string.h> //向管道中写数据 int main(){ //判断文件是否存在 int ret1 = access("fifo1",F_OK); if(ret1==-1){ printf("文件不存在,创建"); //创建管道文件 int ret = mkfifo("fifo1", 0664); if(ret == -1){ perror("mkfifo"); exit(0); } } //以只写方式打开管道 int fd = open("fifo1", O_WRONLY); if(fd==-1){ perror("open"); exit(0); } for(int i =0;i<100;++i){ char buf[1024]; sprintf(buf,"hello: %d\n", i); printf("write date: %s\n", buf); write(fd, buf, strlen(buf)); sleep(1); } close(fd); return 0; }
/* 从有名管道读数据 */ #include <sys/stat.h> #include <sys/types.h> #include <unistd.h> #include <sys/wait.h> #include <stdlib.h> #include<stdio.h> #include <fcntl.h> #include<string.h> //从管道中读数据 int main(){ //1.打开管道文件 int fd = open("fifo1", O_RDONLY); if(fd ==-1){ perror("open"); exit(0); } //2.读数据 while(1){ char buf[1024] = {0}; int len = read(fd, buf, sizeof(buf)); //如果写端已经关闭 if(len==0){ printf("写端断开连接了.....\n"); break; } printf("recv buf: %s\n", buf); } //3.关闭文件描述符 close(fd); return 0; }
2.3 使用有名管道完成简单的进程间聊天
功能为进程A和进程B之间依次交替发送和接收,不连续发送和接收(利用两根管道),流程如下:
代码:
进程A :
#include <sys/stat.h> #include <sys/types.h> #include <unistd.h> #include <sys/wait.h> #include <stdlib.h> #include<stdio.h> #include <fcntl.h> #include<string.h> //进程A int main(){ //1.判断有名管道文件是否存在(管道1) int ret = access("fifo1",F_OK); if(ret==-1){ printf("管道不存在,创建对应管道\n"); ret = mkfifo("fifo1", 0664); if(ret == -1){ perror("mkfifo"); exit(0); } } //2.判断有名管道文件是否存在(管道2) ret = access("fifo2",F_OK); if(ret==-1){ printf("管道不存在,创建对应管道\n"); ret = mkfifo("fifo2", 0664); if(ret == -1){ perror("mkfifo"); exit(0); } } //3.以只写的方式打开管道1 int fdw = open("fifo1", O_WRONLY); if(fdw==-1){ perror("open"); exit(0); } printf("打开FIFO1成功,等待写入数据\n"); //4.以只读的方式打开管道2 int fdr = open("fifo1", O_RDONLY); if(fdr==-1){ perror("open"); exit(0); } printf("打开fifo2成功,等待读取数据\n"); char buf[128]; //4.循环写读数据 while(1){ //获取标准输入 memset(buf, 0, 128); fgets(buf, 128, stdin); //写数据 ret = write(fdw, buf ,strlen(buf)); if(ret == -1){ perror("write"); exit(0); } //等待读取管道2数据 memset(buf, 0, 128); ret = read(fdr, buf, 128); //如果没有可读取数据 if(ret<=0){ perror("read:"); break; } printf("get: %s\n", buf); } //关闭文件描述符 close(fdw); close(fdr); return 0; }
进程B:
#include <sys/stat.h> #include <sys/types.h> #include <unistd.h> #include <sys/wait.h> #include <stdlib.h> #include<stdio.h> #include <fcntl.h> #include<string.h> //进程B int main(){ //1.判断有名管道文件是否存在(管道1) int ret = access("fifo1",F_OK); if(ret==-1){ printf("管道不存在,创建对应管道\n"); ret = mkfifo("fifo1", 0664); if(ret == -1){ perror("mkfifo"); exit(0); } } //2.判断有名管道文件是否存在(管道2) ret = access("fifo2",F_OK); if(ret==-1){ printf("管道不存在,创建对应管道\n"); ret = mkfifo("fifo2", 0664); if(ret == -1){ perror("mkfifo"); exit(0); } } //3.以只读的方式打开管道1 int fdr = open("fifo1", O_RDONLY); if(fdr==-1){ perror("open"); exit(0); } printf("打开FIFO1成功,等待读取数据\n"); //4.以只写的方式打开管道2 int fdw = open("fifo1", O_WRONLY); if(fdw==-1){ perror("open"); exit(0); } printf("打开fifo2成功,等待写入数据\n"); char buf[128]; //4.循环读写数据 while(1){ //等待读取管道2数据 memset(buf, 0, 128); ret = read(fdr, buf, 128); //如果没有可读取数据 if(ret<=0){ perror("read:"); break; } printf("get: %s\n", buf); //获取标准输入 memset(buf, 0, 128); fgets(buf, 128, stdin); //写数据 ret = write(fdw, buf ,strlen(buf)); if(ret == -1){ perror("write"); exit(0); } } //关闭文件描述符 close(fdw); close(fdr); return 0; }
2.4. 有名管道+父子进程实现聊天功能
使用g++,和gcc类似
chaA:
#include <sys/stat.h> #include <sys/types.h> #include <unistd.h> #include <sys/wait.h> #include <stdlib.h> #include <iostream> #include <fcntl.h> #include <string.h> using namespace std; //进程A int main(){ pid_t pid = fork(); int ret; if(pid == -1){ perror("fork"); exit(0); } //A进程本身(父进程),实现管道一的写入 else if(pid>0){ ret = access("fifo1", F_OK); if(ret==-1){ cout<<"管道不存在,创建对应管道"<<endl; ret = mkfifo("fifo1", 0664); //管道创建失败 if(ret==-1){ perror("fifo1"); exit(0); } } //以只写的方式打开管道一 int fdw = open("fifo1", O_WRONLY); //打开失败 if(fdw==-1){ perror("open"); exit(0); } printf("打开FIFO1成功,等待写入数据\n"); //循环写入 char buf[128]; while(1){ memset(buf,0,128); cin.getline(buf,128); ret = write(fdw, buf, strlen(buf)); if(ret == -1){ perror("write"); exit(0); } } close(fdw); } //A进程的子进程,实现管道二的读取 else if (pid == 0){ ret = access("fifo2", F_OK); if(ret==-1){ cout<<"管道不存在,创建对应管道"<<endl; ret = mkfifo("fifo2", 0664); //管道创建失败 if(ret==-1){ perror("fifo2"); exit(0); } } //以只读的方式打开管道2 int fdr = open("fifo2", O_RDONLY); //打开失败 if(fdr==-1){ perror("open"); exit(0); } cout<<"打开FIFO2成功,等待读取数据"<<endl; //循环读取 char buf[128]; while(1){ memset(buf, 0, 128); ret = read(fdr, buf, 128); //如果没有可读取数据 if(ret<=0){ perror("read:"); break; } cout<<"get:"<<buf<<endl; } close(fdr); } return 0; }
chatB:
#include <sys/stat.h> #include <sys/types.h> #include <unistd.h> #include <sys/wait.h> #include <stdlib.h> #include <iostream> #include <fcntl.h> #include <string.h> using namespace std; //进程B int main(){ pid_t pid = fork(); int ret; if(pid == -1){ perror("fork"); exit(0); } //B进程本身(父进程),实现管道一的读取 else if(pid>0){ ret = access("fifo1", F_OK); if(ret==-1){ cout<<"管道不存在,创建对应管道"<<endl; ret = mkfifo("fifo1", 0664); //管道创建失败 if(ret==-1){ perror("fifo1"); exit(0); } } //以只读的方式打开管道一 int fdr = open("fifo1", O_RDONLY); //打开失败 if(fdr==-1){ perror("open"); exit(0); } printf("打开FIFO1成功,等待读取数据\n"); //循环读取 char buf[128]; while(1){ memset(buf, 0, 128); ret = read(fdr, buf, 128); //如果没有可读取数据 if(ret<=0){ perror("read:"); break; } cout<<"get:"<<buf<<endl; } close(fdr); } //B进程的子进程,实现管道二的写入 else if (pid == 0){ ret = access("fifo2", F_OK); if(ret==-1){ cout<<"管道不存在,创建对应管道"<<endl; ret = mkfifo("fifo2", 0664); //管道创建失败 if(ret==-1){ perror("fifo2"); exit(0); } } //以只写的方式打开管道2 int fdw = open("fifo2", O_WRONLY); //打开失败 if(fdw==-1){ perror("open"); exit(0); } cout<<"打开FIFO2成功,等待写入数据"<<endl; //循环写入 char buf[128]; while(1){ memset(buf,0,128); cin.getline(buf,128); ret = write(fdw, buf, strlen(buf)); if(ret == -1){ perror("write"); exit(0); } } close(fdw); } return 0; }
三、内存映射
3.1 什么是内存映射
内存映射(Memory-mapped I/O)是将磁盘文件的数据映射到内存,用户通过修改 内存就能修改磁盘文件。
3.2 操作内存映射函数void *mmap(void *addr, size_t length, int prot, int flags, int fd, off_t offset);
有关系的进程间的通信:
/* #include <sys/mman.h> void *mmap(void *addr, size_t length, int prot, int flags, int fd, off_t offset); 功能:映射文件或者设备数据到内存中 参数: -addr:所映射内存的首地址,传递NULL,由内核指定 -length:要映射的内存的长度。这个值不能小于等于0,而且是内存分页的整数倍 建议使用文件的长度 获取文件长度stat/lseek。 -prot:对申请内存映射区的操作权限,为整数宏,多个权限按位或 PROT_EXEC 可执行权限 PROT_READ 读权限 PROT_WRITE 写权限 PROT_NONE 没有权限 要操作映射内存必须要有读权限(无论写还是读) -flags -MAP_SHARED:映射区数据会自动和磁盘文件进行同步,要进程间通信必须要设置此权限 -MAP_PRIVATE:内存映射改变,但是原来文件不修改,如果写数据时,会重新创建新文件。 -MAP_ANONYMOUS:创建匿名映射(只能用在有关系的进程), 文件描述符将被忽略,偏移量将设置为0 -fd -文件描述符,open()获取,文件大小不能为0,open指定的权限必须大于prot权限 -offset -偏移量,从offset开始。必须指定4k整数倍,0表示不偏移 返回值: -成功:映射内存的首地址 -错误:返回MAP_FAILED(void * -1) int munmap(void *addr, size_t length); 功能:释放内存映射 -参数: -addr:释放内存的首地址 -length:和mmap指定的大小一致 */ /* 使用内存映射实现进程间通信 1.有关系的进程: -1.在还没有子进程的时候通过唯一的父进程创建内存映射区 -2.创建子进程 -3.父子进程共享创建的内存映射区 2.没有关系的进程: -1.准备一个大小非0的磁盘文件 -2.进程A通过磁盘文件创建内存映射区 -得到操作这块内存的指针 进程B通过磁盘文件创建内存映射区 -得到操作这块内存的指针 -3.进程间通信 TIP:内存映射的方式进程通信非阻塞 */ #include <sys/mman.h> #include <sys/stat.h> #include <sys/types.h> #include <unistd.h> #include <sys/wait.h> #include <stdlib.h> #include<stdio.h> #include <fcntl.h> #include<string.h> int main(){ //1.打开一个文件 int fd = open("test.txt", O_RDWR); if(fd == -1){ perror("open"); exit(0); } int size = lseek(fd, 0, SEEK_END);//获取文件大小 //2.获取文件映射区 void *ptr = mmap(NULL, size, PROT_READ|PROT_WRITE, MAP_SHARED, fd, 0); if(ptr == MAP_FAILED){ perror("mmap"); exit(0); } pid_t pid = fork(); //父进程读数据 if(pid>0){ wait(NULL); char buf[64]; strcpy(buf, (char *)ptr); printf("read data:%s\n", buf); } //子进程写数据 else if(pid==0){ strcpy((char *)ptr, "nihao a my Dad!!!"); } munmap(ptr, size); return 0; }
3.3 内存映射的注意事项
◼ 如果对mmap的返回值(ptr)做++操作(ptr++), munmap是否能够成功?
1.可以对ptr进行++操作
2.但是munmap(ptr,size)会错误
3.在++操作前,对ptr值进行拷贝
◼ 如果open时O_RDONLY, mmap时prot参数指定PROT_READ | PROT_WRITE会怎样?
会直接返回MAP_FAILED,无法成功创建内存映射
建议open()函数中的权限和prot参数权限保持一致
◼ 如果文件偏移量为1000会怎样?
偏移量必须为4K整数倍,会返回MAP_FAILED
◼ mmap什么情况下会调用失败?
1.当length==0时
2.当prot权限超过open
3.文件偏移量不为4K整数倍
◼ 可以open的时候O_CREAT一个新文件来创建映射区吗?
-可以,但是所创建的文件大小不能为0
-可以用lseek,truncate对文件进行拓展
◼ mmap后关闭文件描述符,对mmap映射有没有影响?
此时映射区仍然存在,只是文件描述符被关闭了,没有任何影响
◼ 对ptr越界操作会怎样
越界操作操作非法内存,会产生段错误