C++linux高并发服务器项目实践 day7
- 进程间通信
- 匿名管道
- 管道的特点
- 匿名管道的使用
- 创建匿名管道
- 查看管道缓冲大小命令
- 查看管道缓冲大小函数
- 匿名管道通信案例
- 管道的读写特点
- 有名管道
- 有名管道的使用
- 写FIFO管道
- 读FIFO管道
- 总结
- 有名管道实现简单版聊天功能
进程间通信
- 进程是一个独立的资源分配单元，不同进程(这里所说的进程通常指的是用户进程)之间的资源是独立的，没有关联，不能再一个进程中直接访问另一个进程的资源
- 但是，进程不是孤立的，不同的进程需要进行信息的交互和状态的传递等，因此需要进程间通信
- 进程间通信的目的：
- 数据传输：一个进程需要将它的数据发送给另一个进程
- 通知事件：一个进程需要向另一个或一组进程发送消息，通知他们发生了某种事件（如进程终止时要通知父进程）
- 资源共享：多个进程之间共享同样的资源。为了做到这一点，需要内核提供互斥和同步机制
- 进程控制：有些进程希望完全控制另一个进程的执行（如Debug进程），此时控制进程希望能够拦截另一个进程的所有陷入和一次，并能够及时知道它的状态改变
匿名管道
- 管道也叫无名(匿名)管道，它是UNIX系统IPC(进程间通信)的最古老性形式，所有的UNIX系统都支持这种通信机制
- 统计一个目录中文件的数目目录:ls | wc -l ,为了执行该命令，shell创建另两个进程来分别执行ls和wc
管道的特点
- 管道其实是一个在内核内存中维护的缓冲器，这个缓冲器的存储能力是有限的，不同的操作系统大小不一定相同
- 管道拥有文件的特质：读操作、写操作，匿名管道没有文件实体，有名管道有文件实体，但不存储数据。可以按照操作文件的方式对管道进行操作
- 一个管道是一个字节流，使用管道时不存在消息或者消息边界的概念，从管道读取数据的进程可以读取任意大小的数据块，而不管写入进程写入管道的数据块的大小是多少
- 通过管道传递的数据是顺序的，从管道中读取出来的字节的顺序和他们被写入管道的顺序是完全一样的
- 在管道中的数据的传递方向是单向的，一端用于写入，一端用于读取，管道是半双工的。
- 在管道读数据是一次性操作，数据一旦被读走，它就从管道中被抛弃，释放空间以便写更多的数据，在管道中无法使用lseek()来随机访问数据
- 匿名管道只能在具有公共祖先的进程（父进程与子进程，或者两个兄弟进程，具有亲缘关系）之间使用
管道的数据结构是循环队列结构
匿名管道的使用
- 创建匿名管道
#include <unistd.h>
int pipe(int pipefd[2]); - 查看管道缓冲大小命令
ulimit -a - 查看管道缓冲大小函数
#include <unistd.h>
long fpathconf(int fd,int name);
创建匿名管道
#include <unistd.h>
int pipe(int pipefd[2]);
功能：创建一个匿名管道，用来进程间通信
参数：int pipefd[2] 这个数组是一个传出参数。
pipefd[0] 对应的是管道的读端
pipefd[1] 对应的是管道的写端
返回值:
成功返回 0
失败返回 -1
管道默认是阻塞的：如果管道中没有数据，read阻塞，如果管道满了，write阻塞
注意：匿名管道只能哟弄关于具有关系的进程之间的通信(父子进程，兄弟进程)
#include <unistd.h>
#include <sys/types.h>
#include <stdio.h>
#include <stdlib.h>
#include <string.h>
//子进程发送数据给父进程，父进程读取到数据后输出
int main(){
//在fork之前创建管道
int pipefd[2];
int ret = pipe(pipefd);
if(ret == -1){
perror("pipe");
exit(0);
}
//创建子进程
pid_t pid = fork();
if(pid > 0){
//父进程
printf("i am parent process,pid :%d\n",getpid());
//从管道读取端读取数据
char buf[1024] = {0};
while(1){
int len = read(pipefd[0],buf,sizeof(buf));
printf("parent recv : %s,pid : %d\n",buf,getpid());
char *str = "hello,i am parent";
write(pipefd[1],str,strlen(str));
sleep(1);
}
}else if(pid == 0){
//子进程
printf("i am child process,pid :%d\n",getpid());
char buf[1024] = {0};
while(1){
char *str = "hello,i am child";
write(pipefd[1],str,strlen(str));
sleep(1);
int len = read(pipefd[0],buf,sizeof(buf));
printf("child recv : %s,pid : %d\n",buf,getpid());
}
}
return 0;
}
查看管道缓冲大小命令
ulimit -a
输入后，可以在pipe size一行查看大小
这里显示的数值是块的多少，而块的大小在前面
查看管道缓冲大小函数
#include <unistd.h>
long fpathconf(int fd, int name);
long pathconf(const char *path, int name);
#include <unistd.h>
#include <sys/types.h>
#include <stdio.h>
#include <stdlib.h>
#include <string.h>
int main(){
int pipefd[2];
int ret = pipe(pipefd);
//获取管道的大小
long size = fpathconf(pipefd[0],_PC_PIPE_BUF);
printf("pipe size: %ld\n",size);
return 0;
}
匿名管道通信案例
实现ps aux|grep xxx
父子进程间通信
子进程: ps aux ，子进程结束后，将数据发送给父进程
父进程:获取到数据，过滤
pipe()
execlp()
子进程将标准输出 stdout_fileno 重定向到管道的写端。dup2()
#include <unistd.h>
#include <sys/types.h>
#include <stdio.h>
#include <stdlib.h>
#include <string.h>
#include <wait.h>
int main(){
//创建一个管道
int fd[2];
int ret = pipe(fd);
if(ret == -1){
perror("pipe");
exit(0);
}
//创建子进程
pid_t pid = fork();
if(pid > 0){
//父进程
//关闭写端
close(fd[1]);
//从管道中读取
char buf[1024] = {0};
int len = -1;
while ((len = read(fd[0],buf,sizeof(buf)-1)) > 0)
{
//过滤数据输出
printf("%s",buf);
memset(buf,0,1024);
}
wait(NULL);
}else if (pid == 0)
{
//子进程
//关闭读端
close(fd[0]);
//文件描述符的重定向 stdout_fileno -> fd[1]
dup2(fd[1],STDOUT_FILENO);
//执行ps aux
execlp("ps","ps","aux",NULL);
perror("execlp");
exit(0);
}else
{
perror("fork");
exit(0);
}
return 0;
}
管道的读写特点
使用管道时，需要注意一下几种特殊情况（假设都是阻塞I/O操作）：
- 所有的指向管道写端的文件描述符都关闭了(管道写端引用计数为0)，有进程从管道的读端读数据，那么管道中剩余的数据被读取以后，再次read会返回0，就像读到文件末尾一样
- 如果有指向管道写端的文件描述符没有关闭（管道的写端引用计数大于0），而持有管道写端的也没有往管道中写数据，这个时候有进程从管道中读取数据，那么管道中剩余的数据被读取后，我们再次调用read会阻塞，直到管道中有数据可以读了才读取数据并返回
- 如果所有指向管道读端的文件描述符都关闭了（管道的读端引用计数为0），这个时候有进程向管道中写数据，那么该进程会收到一个信号SIGPIPE,通常会导致进程异常终止。
- 如果有指向管道读端的文件描述符没有关闭（管道的读端引用计数大于0），而持有管道读端的进程也没有从管道中读数据，这是有进程向管道中写数据，那么在管道被写满的时候再次write会阻塞，直到管道中有空位置才能再次写入数据并返回
总结：
-
读管道：
- 管道中有数据，read返回实际读到的字节数
- 管道中无数据：
- 写端被全部关闭，read返回0（相当于读到文件的末尾）
- 写端没有完全关闭，read阻塞等待
-
写管道：
- 管道读端全部被关闭，进程异常终止（进程收到SIGPIPE信号）
- 管道读端没有全部关闭：
- 管道已满，write阻塞
- 管道没有满，write将数据写入，并返回实际写入的字节数
设置管道非阻塞
int flags = fcntl(fd[0],F_GETFL);//获取原来的flag
flags |= O_NONBLOCK; //修改flag的值
fcntl(fd[0],F_SETFL,flags); //设置新的flag
int main(){
//在fork之前创建管道
int pipefd[2];
int ret = pipe(pipefd);
if(ret == -1){
perror("pipe");
exit(0);
}
//创建子进程
pid_t pid = fork();
if(pid > 0){
//父进程
printf("i am parent process,pid :%d\n",getpid());
//关闭写端
close(pipefd[1]);
//从管道读取端读取数据
char buf[1024] = {0};
int flags = fcntl(pipefd[0],F_GETFL);//获取原来的flag
flags |= O_NONBLOCK; //修改flag的值
fcntl(pipefd[0],F_SETFL,flags); //设置新的flag
while(1){
int len = read(pipefd[0],buf,sizeof(buf));
printf("len :%d\n",len);
printf("parent recv : %s,pid : %d\n",buf,getpid());
memset(buf,0,1024);
sleep(1);
//向管道中写入数据
// char *str = "hello,i am parent";
// write(pipefd[1],str,strlen(str));
// sleep(1);
}
}else if(pid == 0){
//子进程
printf("i am child process,pid :%d\n",getpid());
//关闭读端
close(pipefd[0]);
char buf[1024] = {0};
while(1){
char *str = "hello,i am child";
write(pipefd[1],str,strlen(str));
sleep(10);
// int len = read(pipefd[0],buf,sizeof(buf));
// printf("child recv : %s,pid : %d\n",buf,getpid());
}
}
有名管道
-
匿名管道，由于没有名字，只能用于亲缘关系的进程间通信。为了克服这个缺点，提出了有名管道(FIFO)，也叫命名管道、FIFO文件
-
有名管道（FIFO）不同于匿名管道之处在于它提供了一个路径名与之关联，以FIFO的文件形式存在于文件系统中，并且其打开方式与打开一个普通文件是一样的，这样即使与FIFO的创建进程不存在亲缘关系的进程，只要可以访问该路径，就能够彼此通过FIFO相互通信，因此，通过FIFO不相关的进程也能交换数据
-
一旦打开了FIFO，就能在它上面使用与操作匿名管道和其他文件的系统调用一样的I/O系统调用了(如read()、write()和close())。与管道一样，FIFO也有一个写入端和读取端，并且从管道中读取数据的顺序与写入的顺序是一样的。FIFO的名称也由此而来：先入先出
-
有名管道（FIFO）和匿名管道（pipe）有一些特点是相同的，不同的地方在于：
- FIFO在文件系统中作为一个特殊文件存在，但FIFO中的内容却存放在内存中
- 当使用FIFO的进程退出后，FIFO文件将继续保存在文件系统中以便后面使用
- FIFO有名字，不相关的进程可以通过打开有名管道进行通信
有名管道的使用
- 通过命令创建有名管道
mkfifo 名字 - 通过函数创建有名管道
#include <sys/types.h>
#include <sys/stat.h>
int mkfifo(const char *pathname,mode_t mode): - 一旦使用mkfifo创建了一个FIFO，就可以使用open打开他，常见的文件I/O函数都可用于fifo。如：close、read、write、unlink等
- FIFO严格遵循先进先出，对管道及FIFO的读总是从开始处返回数据，对他们的写则把数据添加到末尾。他们不支持诸如lseek()等文件定位操作
创建fifo文件
- 通过命令：mkfifo 名字
- 通过函数：int mkfifo(const char *pathname,mode_t mode);
#include <sys/types.h>
#include <sys/stat.h>
int mkfifo(const char *pathname, mode_t mode);
参数：
- pathname:管道的名称的路径
- mode:文件的权限 和open的mode是一样的
是一个八进制的数
返回值:成功返回0,失败返回-1,并设置errno
#include <sys/types.h>
#include <sys/stat.h>
#include <stdio.h>
#include <unistd.h>
int main(){
//判断文件是否存在
int ret = access("fifo1",F_OK);
if(ret == -1){
printf("管道不存在，创建管道\n");
ret = mkfifo("fifo1",0664);
if(ret == -1){
perror("mkfifo");
return -1;
}
}
return 0;
}
写FIFO管道
//向管道中写数据
#include <sys/types.h>
#include <sys/stat.h>
#include <stdio.h>
#include <stdlib.h>
#include <unistd.h>
#include <fcntl.h>
#include <string.h>
int main(){
//1.判断文件是否存在
int ret = access("test",F_OK);
if(ret == -1){
printf("管道不存在，创建管道\n");
//2.创建管道文件
ret = mkfifo("test",0664);
if(ret == -1){
perror("mkfifo");
return -1;
}
}
//3.以只写的方式打开管道
int fd = open("test",O_WRONLY);
if(fd == -1){
perror("open");
exit(0);
}
//4.写入数据
for(int i = 0;i < 100;i++){
char buf[1024];
sprintf(buf ,"hello,%d\n",i);
printf("write data:%s\n",buf);
write(fd,buf,strlen(buf));
sleep(1);
}
//5.关闭文件流
close(fd);
return 0;
}
读FIFO管道
//从管道中读数据
#include <sys/types.h>
#include <sys/stat.h>
#include <stdio.h>
#include <stdlib.h>
#include <unistd.h>
#include <fcntl.h>
int main(){
//1.打开管道文件
int fd = open("test",O_RDONLY);
if(fd == -1){
perror("open");
exit(0);
}
//2.读数据
while (1)
{
char buf[1024] = {0};
int ret = read(fd,buf,sizeof(buf));
if(ret == 0){
printf("写端断开连接了。。。\n");
break;
}
printf("recv bu : %s\n",buf);
}
//3.关闭读管道
close(fd);
return 0;
}
总结
有名管道的注意事项：
- 一个为只读而打开一个管道的进程会阻塞，直到另外一个进程为写打开管道
- 一个为只写而打开一个管道的进程会阻塞，直到另外一个进程为读打开管道
读管道：
管道中有数据，read返回实际读到的字节数
管道中无数据:
- 管道写端被全部关闭，read返回0(相当于读到文件末尾)
- 管道写端被部分关闭，read阻塞等待
写管道:
管道读端被全部关闭，进程异常终止(收到一个SIGPIPE信号)
管道读端没有全部关闭:
- 管道已经满了，write会阻塞
- 管道没有满，write将数据写入，并返回实际写入的字节数
有名管道实现简单版聊天功能
需求：
进程A的代码：B的类似
#include <stdio.h>
#include <sys/stat.h>
#include <sys/types.h>
#include <stdlib.h>
#include <unistd.h>
#include <fcntl.h>
#include <string.h>
int main(){
//1.判断有名管道文件是否存在
int ret = access("fifo1",F_OK);
if(ret == -1){
//文件不存在
printf("fifo1管道不存在，创建对应的有名管道");
ret = mkfifo("fifo1",0664);
if(ret == -1){
perror("mkfifo");
exit(0);
}
}
ret = access("fifo2",F_OK);
if(ret == -1){
//文件不存在
printf("fifo2管道不存在，创建对应的有名管道");
ret = mkfifo("fifo2",0664);
if(ret == -1){
perror("mkfifo");
exit(0);
}
}
//2.以只写的方式打开管道fifo1
int fdw = open("fifo1",O_WRONLY);
if(fdw == -1){
perror("open");
exit(0);
}
printf("打开管道fifo1成功，等待写入..");
//3.以只读的方式打开管道fifo2
int fdr = open("fifo2",O_RDONLY);
if(fdr == -1){
perror("open");
exit(0);
}
printf("打开管道fifo2成功，等待读取..");
char buf[128];
//4.循环写读数据
while (1)
{
memset(buf,0,128);
//获取标准输入的数据
fgets(buf,128,stdin);
//写数据
ret = write(fdw,buf,strlen(buf));
if(ret == -1){
perror("write");
exit(0);
}
//5.读管道fifo2的数据
memset(buf,0,128);
ret = read(fdr,buf,128);
if(ret <= 0){//-1是读取失败,0是对面把管道关闭了
perror("read");
break;
}
printf("buf : %s\n",buf);
}
//6.关闭文件描述符
close(fdw);
close(fdr);
return 0;
}
