目录
进程间通信介绍
进程间通信目的
进程间通信发展
进程间通信分类
管道
System V IPC
POSIX IPC
管道
什么是管道
匿名管道
用fork来共享管道原理
站在文件描述符角度-深度理解管道
管道读写规则
管道特点
命名管道
创建一个命名管道
匿名管道与命名管道的区别
命名管道的打开规则
system V共享内存
共享内存示意图
共享内存数据结构
共享内存函数
shmget函数
shmat函数
shmdt函数
shmctl函数
自己总结
共享内存
编辑
- 进程间通信介绍
- 管道
- 消息队列
- 共享内存
- 信号量
进程间通信介绍
进程间通信目的
- 数据传输:一个进程需要将它的数据发送给另一个进程
- 资源共享:多个进程之间共享同样的资源。
- 通知事件:一个进程需要向另一个或一组进程发送消息,通知它(它们)发生了某种事件(如进程终止 时要通知父进程)。
- 进程控制:有些进程希望完全控制另一个进程的执行(如Debug进程),此时控制进程希望能够拦截另 一个进程的所有陷入和异常,并能够及时知道它的状态改变。
进程间通信发展
- 管道
- System V进程间通信
- POSIX进程间通信
进程间通信分类
管道
- 匿名管道pipe
- 命名管道
System V IPC
- System V 消息队列
- System V 共享内存
- System V 信号量
POSIX IPC
- 消息队列
- 共享内存
- 信号量
- 互斥量
- 条件变量
- 读写锁
管道
什么是管道
- 管道是Unix中最古老的进程间通信的形式。
- 我们把从一个进程连接到另一个进程的一个数据流称为一个“管道”
匿名管道
匿名管道 Linux-CSDN博客 详细看这里
#include <unistd.h>
功能:创建一无名管道
原型
int pipe(int fd[2]);
参数
fd:文件描述符数组,其中fd[0]表示读端, fd[1]表示写端
返回值:成功返回0,失败返回错误代码
管道
首先自己要用用户层缓冲区,还得把用户层缓冲区拷贝到管道里,(从键盘里输入数据到用户层缓冲区里面),然后用户层缓冲区通过系统调用(write)写到管道里,然后再通过read系统调用,被对方(读端)读取,就要从管道拷贝到读端,然后再显示到显示器上。
pipe创建一个管道
pipe的介绍
1完成这件事:
看图分析
运行结果
#include<iostream>
#include<unistd.h>
using namespace std;
int main()
{
//创建管道
//先创建一个pipefd数组
int pipefd[2];
//用n接受一下,判断是否成功
int n = pipe(pipefd);
if(n<0) return 1;//创建失败了
//创建成功
//测试一下文件描述符是3和4
cout<<"pipefd[0]:"<<pipefd[0]<<"pipefd[1]:"<<pipefd[1]<<endl;
return 0;
}
2完成这件事:
创建一个子进程
pid_t id = fork();
if(id < 0)return 2;//创建失败
if(id == 0)//创建成功
{
//子进程
}
//父进程
让子进程写入,父进程读取
要想让子进程进程写,就需要在进程中关闭读端
if(id == 0)//创建成功
{
//子进程
close(pipefd[0]);
}
同理
//父进程
close(pipefd[1]);
都用完结束后,可以都关掉
if(id == 0)//创建成功
{
//子进程
close(pipefd[0]);
//.....
close(pipefd[1]);
}
//父进程
close(pipefd[1]);
//.....
close(pipefd[0]);
IPC code,写通信代码
3这件事也完成了:
结构就有了
然后在pipefd[1]这个管道里写,定义一个Writer函数ostream::write - C++ Reference (cplusplus.com)
istream::read - C++ Reference (cplusplus.com)
if(id == 0)//创建成功
{
//子进程
close(pipefd[0]);
//.....IPC code,写通信代码
//在pipefd[1]这个管道里写
Writer(pipefd[1]);
close(pipefd[1]);
exit(0);//正常退出
}
同理父进程的
//父进程
close(pipefd[1]);
//.....IPC code,写通信代码
//在pipefd[0]这个管道里写
Reader(pipefd[0]);
close(pipefd[0]);
//子进程
void Writer(int wfd)
{
}
//父进程
void Reader(int rfd)
{
}
Writer
//子进程
void Writer(int wfd)
{
string s = "hello,I am child";
pid_t self = getpid();
int number = 0;
char buffer[10];
while(true)
{
buffer[0] = 0;//字符串清空,只是为了提醒阅读代码的人,我把这个数组当字符串了
}
}
用到snprintfsnprintf - C++ Reference (cplusplus.com)
介绍
将s和self和number放进buffer
char buffer[100];
while(true)
{
buffer[0] = 0;//字符串清空,只是为了提醒阅读代码的人,我把这个数组当字符串了
snprintf(buffer,sizeof(buffer),"%s pid:%d\n",s.c_str(),self);
cout<< buffer <<endl;
sleep(1);
};
用cout打印测试一下,打印成功说明写入buffer成功了
等待进程少不了,子进程exit后需要回收
//父进程
close(pipefd[1]);
//.....IPC code,写通信代码
//在pipefd[0]这个管道里写
Reader(pipefd[0]);
//等待进程缺少不了
pid_t rid = waitpid(id,nullptr,0);
if(rid < 0) return 3;//等待失败了
close(pipefd[0]);
如何把消息发送/写入给父进程
用到了write
用write写入管道(管道也是文件),用strlen,不用+1,不用管\0,因为C语言规定\0结尾,和文件没有关系,wfd写入管道
//子进程
void Writer(int wfd)
{
string s = "hello,I am child";
pid_t self = getpid();
int number = 0;
char buffer[100];
while(true)
{
buffer[0] = 0;//字符串清空,只是为了提醒阅读代码的人,我把这个数组当字符串了
snprintf(buffer,sizeof(buffer),"%s pid:%d %d\n",s.c_str(),self,number++);
//用write写入管道(管道也是文件),用strlen,不用+1,不用管\0,因为C语言规定\0结尾,和文件没有关系,wfd写入管道
write(wfd,buffer,strlen(buffer));
//cout<< buffer <<endl;
sleep(1);
};
}
父进程该怎么读取呢
用到了read,fd是文件描述符,从特定的文件描述符里读取,放在这个buf里,buf的长度是count
这里就需要考虑到\0,因为buffer中需要\0
//父进程
void Reader(int rfd)
{
char buffer[100];
while(true)
{
buffer[0] = 0;
//用sizeof是为了留个空间放\0
ssize_t n = read(rfd, buffer, sizeof(buffer));//sizeof!=strlen
if(n > 0)
{
//添加\0,因为要放在buffer数组中读取
buffer[n]=0;
cout << "father get a message[" << getpid() <<"]"<< buffer <<endl;
}
}
}
运行结果
也会发现:为什么子进程sleep,父进程不sleep,父进程还是会跟着子进程sleep,因为父子进程是要协同的
管道本质
通信是为了更好的发送变化的数据,管道本质上是文件
所以必须要用到系统调用接口来访问管道,其是由系统管理,read和write
,操作系统相当于中介
结论:管道的特征:
1:具有血缘关系的进程进行进程间通信
2:管道只能单向通信
3:父子进程是会进程协同的,同步与互斥的--保护管道文件的数据安全
4:管道是面向字节流的
5:管道是基于文件的,而文件的生命周期是随进程的
1:具有血缘关系的进程进行进程间通信 |
2:管道只能单向通信 |
3:父子进程是会进程协同的,同步与互斥的--保护管道文件的数据安全 |
4:管道是面向字节流的 |
5:管道是基于文件的,而文件的生命周期是随进程的 |
再测试,把子进程sleep去掉,就是让子进程写快一点,父进程sleep几秒,就是让父进程读慢一点,看有什么现象
管道的四种情况
测试管道大小
把c一直往管道里写,把父进程中休眠50秒
结果差不多64kb
写端退了,测试结果
结果是:
读端正常读,写端关闭,读端就会读到0,表明读到了文件(pipe)结尾,不会被阻塞
read读取成功会返回读到的字符个数,读到结尾返回0
读到结尾父进程也就可以停止读取了,break后去把僵尸的子进程回收
break到这里
最后子进程会被waitpid回收
测试子进程一直写,父进程读一会就退出
定义一个cnt控制退出的时间
这里也要修改一下,加个sleep(5),观察,close提前关闭
结果:通过13号信号杀死
管道到的应用场景
都会变成一个进程
写一个进程池(pipe_use)
首先创建好文件
创建5个进程
channel通道的意思 |
cmdfd文件描述符 |
slaverid代表哪个子进程 |
把它放进vector容器里
思路步骤
管道创建
void(n),假装使用一下,要不然编译不过
创建父子进程
父进程写,子进程读
子进程要读取,就要关闭自己的写端,父进程同理
子进程中的任务
子进程pid有了管道也有了,就差在父进程添加字段了
先更改一下,在class里构造一下
添加字段
测试一下:结果:文件描述符0,1,2是默认打开,3是从管道里读,4是写入管道
把初始化改造成函数
debug测试函数,纯输入函数
第二步开始控制进程了(想让子进程做什么)
这里打印的rfd都是3,正常吗,文件描述符是可以被子进程继承的
父进程对应的写端拿到的是4-8,子进程拿到的读端fd是3
改变一下,直接从键盘(0号描述符)里读,不从管道(3)里读了,就没有管道的概念了,slaver就不用传参了,父进程通过管道写,子进程通过标准输入读
用到了dup2,将从pipefd[0]中读变成从0开始读
想让父进程固定的向管道里写入指定大小字节的内容,必须读取四个字节,四个字节四个字节的写和读,这里的管道64kb
必须读取四个字节
如果父进程不给子进程发送数据呢?阻塞等待!
开始控制子进程
生成一个随机数种子
可以随机选择任务和选择进程
cmd是任务码,测试一下,父进程控制子进程,父进程发送给子进程(通过cmdcode连续)
在Task.hpp里
要用到函数指针
main中的任务了就属于
再把任务装载进来
输出型参数用*
现在开始选择任务和进程
再把main中的任务弄成全局的
进行判断一下
测试 ,comcode和任创建的任务一致
这里的write是父进程进行写入,向子进程发送,子进程不得闲,先写到管道里,等得闲了再读
也可以轮询选择,定义一个计数器,++弄,再%等
整理一下控制代码,这里是输入型参数,只需要读
这样就可以轮询方式选择进程了,不用随机了
结果
清理收尾
思路:把所有文件的描述符都关掉
等待方式设置为0
read返回0,就是失败了,然后slaver就会调完
结束完就会exit直接退出
打印下更好显示
关闭文件描述符后sleep(10)秒,
然后这10个子进程一瞬间都应该break,然后最后到exit直接就退了,10秒结束后,父进程再回收他
测试时不弄死循环,用cnt,5秒后自动结束控制,正常退出流程
测试结果
手动控制一下
定义一个select,输入0就是退出了,判断完后,就走到了选择任务
然后直接把cmdcode改为选择的select,-1是因为是从下标0开始的,输入1就是0下标的
测试
bug的地方:
这样会有一些bug(一个子进程不是只有一个写端(每一次子进程的创建都是有继承))
这样会有一些bug(一个子进程不是只有一个写端(每一次子进程的创建都是有继承))
按理说这样是对的,可是这样就错了
因为下面两个红线还没有关掉,它们进程了最开始的w
这样倒着回收是可以的
正确改法
修改一下
最后一个push_back的就都是父进程的写入fd,
然后加一句这个红线的,每创建子进程后都先把上一次父进程的读端fd关掉就可以了,这里很妙,因为vector一开始是空的
方便看
这里这样就可以了
管道已经完成
以上是匿名管道
总文件总代码
makefile中代码
ProcessPool:ProcessPool.cc
g++ -o $@ $^ -std=c++11
.PHNOY:clean
clean:
rm -f ProcessPool
Task.hpp中代码
#pragma once
#include<iostream>
#include<vector>
using namespace std;
typedef void (*task_t)();
void task1()
{
cout<< "lol 刷新日志" <<endl;
}
void task2()
{
cout<< "lol 更新野区" <<endl;
}
void task3()
{
cout<< "lol 检测软件更新" <<endl;
}
void task4()
{
cout<< "lol 释放技能" <<endl;
}
ProcessPool.cc中代码
#include "Task.hpp"
#include<iostream>
#include<string>
#include<vector>
#include<unistd.h>
#include<assert.h>
#include <sys/types.h>
#include <sys/wait.h>
using namespace std;
//打算创建5个进程
const int processnum = 5;
//全局任务
vector<task_t> tasks;
//先描述
class channel//管道
{
public:
channel(int cmdfd,pid_t slaverid,string& processname)
:_cmdfd(cmdfd)
,_slaverid(slaverid)
,_processname(processname)
{}
public:
int _cmdfd;//文件描述符
pid_t _slaverid;//代表哪个子进程
string _processname;//子进程的名字,方便打印日志
};
//子进程中读的任务
// void slaver(int rfd)
// {
// while(true)
// {
// cout<< getpid() <<" - "<< "read fd is->"<<rfd<<endl;
// sleep(1000);
// }
// }
//改变一下从fd为0的地方开始读
void slaver()
{
//read(0);
while(true)
{
int cmdcode = 0;
int n = read(0, &cmdcode, sizeof(int));
if(n == sizeof(int))
{
//执行cmdcode对应的任务列表
cout<< "slaver say@ get a command:" << getpid() << ":cmdcode:" << cmdcode <<endl;
//判断一下并执行
if(cmdcode >= 0 && cmdcode < tasks.size()) tasks[cmdcode]();
}
if(n == 0) break;
}
}
//初始化
void Init(vector<channel>& channels)
{
for(int i =0;i < processnum;i++)
{
int pipefd[2];
int n = pipe(pipefd);//创建管道
//返回值小于0就创建失败了
assert(!n);
(void)n;
pid_t id = fork();
if(id == 0)
{
//子进程:读
close(pipefd[1]);
//改变一下从fd为0的地方读
dup2(pipefd[0],0);
close(pipefd[0]);
//任务
slaver();
cout<< "process: " << getpid() << "quit" <<endl;
//slaver(pipefd[0]);
exit(0);
}
//父进程:写
close(pipefd[0]);
//channel添加字段
string name = "processs-" + to_string(i);
//插入的是自定义类型,要构造一下,第一个传的是文件描述符,要写入的fd
channels.push_back(channel(pipefd[1], id, name));
}
}
//测试函数,纯输入函数
//输入:const &
//输出:*
//输入输出:&
void debug(const vector<channel>& channels)
{
for(auto&e : channels)
{
cout<< e._cmdfd <<" "<<e._slaverid<<" "<<e._processname<<endl;
}
}
void Loadtask(vector<task_t> *tasks)
{
tasks->push_back(task1);
tasks->push_back(task2);
tasks->push_back(task3);
tasks->push_back(task4);
}
void memu()
{
cout<< "########################" <<endl;
cout<< "1:lol 刷新日志 2:lol 更新野区" <<endl;
cout<< "1:lol 检测软件更新 4:lol 释放技能" <<endl;
cout<< " 0:退出 " <<endl;
cout<< "########################" <<endl;
}
//2:开始控制子进程
void ctrlSlaver(vector<channel> &channels)
{
int which = 0;
int cnt = 5;
while(true)
{
int select = 0;
memu();
cout<< "Please Enter@:";
cin>> select;
if(select == 0) break;
//1:选择任务
//int cmdcode = rand()%tasks.size();
int cmdcode = select - 1;
//2:随机选择进程
//int processpos = rand()%channels.size();
//2:轮询选择进程
cout<< "father say:"<< "cmdcode:" << cmdcode << " already sendto " <<channels[which]._slaverid << "process name "
<<channels[which]._processname << endl;
//3:发送任务
write(channels[which]._cmdfd, &cmdcode, sizeof(cmdcode));
which++;
which%=channels.size();//保证不大于其长度
cnt--;
if(cnt == 0) break;
sleep(1);
}
}
void QuitProcess(const vector<channel> &channels)
{
for(const auto& e : channels) close(e._cmdfd);
sleep(10);
for(const auto& e : channels) waitpid(e._slaverid, nullptr, 0);//进程的pid=_slaverid,关上了以后记得回收
}
int main()
{
Loadtask(&tasks);
//srand(time(nullptr)^getpid()^1023);//种一个随机数种子
//在组织
vector<channel> channels;
//1:初始化
Init(channels);
debug(channels);
//2:开始控制子进程
ctrlSlaver(channels);
//3:清理收尾
QuitProcess(channels);
return 0;
}
用fork来共享管道原理
站在文件描述符角度-深度理解管道
所以,看待管道,就如同看待文件一样!管道的使用和文件一致,迎合了“Linux一切皆文件思想”。
#include <unistd.h>
#include <stdlib.h>
#include <stdio.h>
#include <errno.h>
#include <string.h>
#define ERR_EXIT(m) \ do \ { \ perror(m); \ exit(EXIT_FAILURE); \ } while(0)
int main(int argc, char *argv[]) { int pipefd[2]; if (pipe(pipefd) == -1) ERR_EXIT("pipe error");
pid_t pid;
pid = fork();
if (pid == -1)
ERR_EXIT("fork error");
if (pid == 0) {
close(pipefd[0]);
write(pipefd[1], "hello", 5);
close(pipefd[1]);
exit(EXIT_SUCCESS);
}
close(pipefd[1]);
char buf[10] = {0};
read(pipefd[0], buf, 10);
printf("buf=%s\n", buf);
return 0;
}
管道读写规则
- 当没有数据可读时
- O_NONBLOCK disable:read调用阻塞,即进程暂停执行,一直等到有数据来到为止。
- O_NONBLOCK enable:read调用返回-1,errno值为EAGAIN。 当管道满的时候
- O_NONBLOCK disable: write调用阻塞,直到有进程读走数据
- O_NONBLOCK enable:调用返回-1,errno值为EAGAIN
- 如果所有管道写端对应的文件描述符被关闭,则read返回0
- 如果所有管道读端对应的文件描述符被关闭,则write操作会产生信号SIGPIPE,进而可能导致write进程退出
- 当要写入的数据量不大于PIPE_BUF时,linux将保证写入的原子性。
- 当要写入的数据量大于PIPE_BUF时,linux将不再保证写入的原子性。
管道特点
- 只能用于具有共同祖先的进程(具有亲缘关系的进程)之间进行通信;通常,一个管道由一个进程创 建,然后该进程调用fork,此后父、子进程之间就可应用该管道。
- 管道提供流式服务
- 一般而言,进程退出,管道释放,所以管道的生命周期随进程
- 一般而言,内核会对管道操作进行同步与互斥
- 管道是半双工的,数据只能向一个方向流动;需要双方通信时,需要建立起两个管道
命名管道
详细看这个
命名管道Linux-CSDN博客
- 管道应用的一个限制就是只能在具有共同祖先(具有亲缘关系)的进程间通信。
- 如果我们想在不相关的进程之间交换数据,可以使用FIFO文件来做这项工作,它经常被称为命名管道。
- 命名管道是一种特殊类型的文件
int main(int argc, char *argv[]) { mkfifo("p2", 0644); return 0; }
创建一个命名管道
- 命名管道可以从命令行上创建,命令行方法是使用下面这个命令:
$ mkfifo filename
- 命名管道也可以从程序里创建,相关函数有:
int mkfifo(const char *filename,mode_t mode);
创建命名管道:
int main(int argc, char *argv[])
{
mkfifo("p2", 0644);
return 0;
}
管道是
毫不相关的进程进程间通信::命名管道
管道
首先自己要用用户层缓冲区,还得把用户层缓冲区拷贝到管道里,(从键盘里输入数据到用户层缓冲区里面),然后用户层缓冲区通过系统调用(write)写到管道里,然后再通过read系统调用,被对方(读端)读取,就要从管道拷贝到读端,然后再显示到显示器上。
mkfifo命名管道
1号手册是指令,。2号系统调用接口
创建一个管道,p开头就是命名管道,并不会直接刷新到磁盘中,实际是个符号
这样会阻塞
这样会显示出来(先输入左边的,再输入右边的就会显示),左右两边是两个进程
>>追加写入的方式,但空间一直是0
所以这就是文件里大小一直是0的原因
你怎么知道打开的是同一个文件
正好符合前提
所以要创建两个可执行程序,各自跑各自的,创建一个common是为了方便使用头文件
client是客户 server是服务者
makefile中一下运行两个程序
mkfifo,用程序的方式创建管道,第一个参数是要创建的这个管道在那个路径下叫什么名字,也就是要保持唯一性的那些点,第二个是创建一个管道
这里是3号手册是函数。
返回 -1创建失败
创建一个共享文件
./myfifo
server.cc和client.cc想看到同一个文件,包含上头文件就可以了
这里先用server控制管道文件
创建管道失败了设置为1 ,如果失败了就exit(1)
谁控制的先运行运行谁就好了
make一下生成两个可执行程序,因为是server控制的,所以要先运行server
运行后就会多一个myfifo命名管道
命名管道的删除
想删除这个myfifo用unlink(成功返回0 ,失败返回-1)
命令行删除
代码也可以删(成功返回0 ,失败返回-1),头文件是unistd.h
创建完文件,5秒后就删除了
思路
用到了open
打开管道文件,第二个参数是只进行读取
enum中
fd<0打开失败了
服务端读取数据
客户端,只要用就行
第二个参数就是打开文件为了写入的
用户输入完成以后,就要发送输入的消息到另一端
打开顺序一定
然后打开的顺序就一定了,先打开server,然后再打开另一个cc
先打开服务端,会阻塞在这里,然后再打开客户端,进行输入
右边输入啥,左边就会有啥
无法输入空格问题(getline)
但有一个问题就是cin没法输入空格,,要用到getline
会发现一个问题,客户端退出了,服务端还没退出
客户端退出,会read到0,所以服务端(读端)也要退出
改正
sever端
等待写入方式打开后,自己才会打开文件,向后执行,open阻塞了!
优化一下
写成进程池的样子
日志
创建一个新文件
用到了可变参数(形参实例化是从右到左)
可变参数必须右至少一个具体的参数
举个例子:步骤:s指向可变部分
这里的sum第一个参数是几个数求和的意思,传不同的类型不可以的,因为上面va_arg里已经写死了
开始写日志,level日志等级
先定义时间,time,时间戳
ctime
头文件
打印具体年月日
年是从1900年开始的
年月日时分秒
vsnprint
vsnprint,跟不带v的区别就是,去除了...换成了可变参数部分
把日记等级转换成字符串风格,所有有可能的地方都需要返回
改进
va_start(s,format),用format修饰s的指向,上面的sum是(s,n),类似
这里要用c_str,因为返回的是string
用完以后再用end
这里是往显示器打印的,这里要*3,以为%s和%s中间有几个空格,空间不够
把这里修改一下,打开失败的话
这样就形成日志了
打印最后一行就是正常打开
这里也改一下
测试,先./server,然后会阻塞,然后./client,就会打印出,logmessage里的信息
为啥./client之前不打印
因为等待写入方式打开后,自己才会打开文件,向后执行,open阻塞了!
往文件里打印(上面是往屏幕打印)
先把这些内容全放在Log,日志类
分类
1:向屏幕打印
2:向一个文件打印
3:分类打印
打印格式printMethod
这里构造默认往屏幕去印
析构
打印方式也改一下
打印单个
以0666的权限打开这个文件
打印多个文件(添加一下level)
实现一下
优化一下
以后再打印日志就不用这样打了
这样就可以了,要记住先创建一个Log对象
这样以后就写入一个文件了,写入log.txt
这样就把日志分类了
结果
但是日志文件这么多太混乱了
这样操作后就统一进入一个文件了
makefile也修改一下,先把path定义的log目录创建一下
日志放入一个文件测试结果:
日志分类测试结果:
log.hpp里头文件
优化一下调用
然后修改一下server.cc
client.cc
#include "common.hpp"
#include "log.hpp"
int main()
{
int fd = open(FIFO_FILE,O_WRONLY);
if(fd < 0)
{
perror("open");
exit(FIFO_OPEN_ERR);
}
string line;
while(true)
{
cout<< "Please Enter@ ";
// cin>> line;
getline(cin, line);
write(fd, line.c_str(),line.size());
}
close(fd);
return 0;
}
common.hpp
#pragma noce
#include<iostream>
#include<vector>
#include<string>
#include<unistd.h>
#include <sys/types.h>
#include <sys/wait.h>
#include <sys/stat.h>
#include<fcntl.h>
#include<stdio.h>
using namespace std;
#define FIFO_FILE "./myfifo"
#define MODE 0664 //用于设置文件的权限,0664代表着8进制写法,4是其他用户可读不可写
enum
{
FIFO_CREATE_ERR = 1,
FIFO_DELETE_ERR,
FIFO_OPEN_ERR
};
class Init
{
public:
Init()
{
//创建管道
int n = mkfifo(FIFO_FILE,MODE);
if(n == -1)
{
perror("mkfofi");
exit(FIFO_CREATE_ERR);
}
}
~Init()
{
//删除命名管道
int m = unlink(FIFO_FILE);
if(m == -1)
{
perror("unlink");
exit(FIFO_DELETE_ERR);
}
}
};
log.hpp
#pragma noce
#include <stdarg.h>
// #include "common.hpp"
#include <iostream>
#include <stdio.h>
#include<string.h>//strerror(errno)头文件
#include<stdlib.h>
using namespace std;
#define Info 0
#define Debug 1
#define Warning 2
#define Error 3
#define Fatal 4 // 致命的
//打印方式
#define Screen 1 //屏幕
#define Onefile 2 //一个文件
#define Classfile 3 //多个文件
#define LogFile "log.txt"
class Log
{
public:
Log()
{
printMehod = Screen;
path = "./log/";
}
void Enable(int method)
{
printMehod = method;
}
string levelToString(int level)
{
switch (level)
{
case Info:
return "Info";
case Debug:
return "Debug";
case Warning:
return "Warning";
case Error:
return "Error";
case Fatal:
return "Fatal";
default:
return "";
}
return "";
}
// void logmessage(int level, const char *format, ...)
// {
// time_t t = time(nullptr);
// struct tm *ctime = localtime(&t);
// char leftbuffer[1024];
// snprintf(leftbuffer, sizeof(leftbuffer), "[%s][%d-%d-%d %d:%d:%d]", levelToString(level).c_str(),
// ctime->tm_year + 1900, ctime->tm_mon + 1, ctime->tm_mday, ctime->tm_hour, ctime->tm_min, ctime->tm_sec);
// va_list s;
// va_start(s, format);
// char rightbuffer[1024];
// vsnprintf(rightbuffer, sizeof(rightbuffer), format, s);
// va_end(s);
// // 格式:默认部分+自定义部分
// char logtxt[1024 * 3];
// snprintf(logtxt, sizeof(logtxt), "%s %s\n", leftbuffer, rightbuffer);
// //cout << logtxt << endl; // 暂时打印
// printLog(level, logtxt);
// }
void operator()(int level, const char* format, ...)
{
time_t t = time(nullptr);
struct tm *ctime = localtime(&t);
char leftbuffer[1024];
snprintf(leftbuffer, sizeof(leftbuffer), "[%s][%d-%d-%d %d:%d:%d]", levelToString(level).c_str(),
ctime->tm_year + 1900, ctime->tm_mon + 1, ctime->tm_mday, ctime->tm_hour, ctime->tm_min, ctime->tm_sec);
va_list s;
va_start(s, format);
char rightbuffer[1024];
vsnprintf(rightbuffer, sizeof(rightbuffer), format, s);
va_end(s);
// 格式:默认部分+自定义部分
char logtxt[1024 * 3];
snprintf(logtxt, sizeof(logtxt), "%s %s\n", leftbuffer, rightbuffer);
//cout << logtxt << endl; // 暂时打印
printLog(level, logtxt);
}
void printLog(int level, const string &logtxt)
{
switch(printMehod)
{
case Screen:
cout<< logtxt <<endl;
break;
case Onefile:
printOneFile(LogFile, logtxt);//"log.txt"
break;
case Classfile:
printClassFile(level, logtxt);
break;
default:
break;
}
}
void printOneFile(const string &logname, const string &logtxt)
{
// "./log/" "log.txt"
string _logname =path + logname;
int fd = open(_logname.c_str(), O_WRONLY|O_CREAT|O_APPEND, 0666);
if(fd < 0) return;
write(fd, logtxt.c_str(), logtxt.size());
close(fd);
}
void printClassFile(int level, const string &logtxt)
{
string filename = LogFile;//"log.txt"
filename += ".";//"log.txt."
filename += levelToString(level); //log.txt.Debug/Waring/Fatal
printOneFile(filename, logtxt);
}
~Log()
{}
private:
int printMehod;
string path;
};
makefile
.PHONY:all
all:client server
server:server.cc
g++ -o $@ $^ -g -std=c++11
mkdir log
client:client.cc
g++ -o $@ $^ -g -std=c++11
.PHONY:clean
clean:
rm -f server client
server.cc
#include "common.hpp"
#include "log.hpp"
int main()
{
//logmessage(Info, "hello");
//创建管道
Init init;
Log log;
//log.Enable(Onefile);
log.Enable(Classfile);
// //创建管道
// int n = mkfifo(FIFO_FILE,MODE);
// if(n == -1)
// {
// perror("mkfofi");
// exit(FIFO_CREATE_ERR);
// }
// sleep(5);
//打开管道
int fd = open(FIFO_FILE,O_RDONLY);
if(fd < 0)
{
//log.logmessage(Fatal, "error string:%s,error code:%d",strerror(errno), errno);
//优化后
log(Fatal, "error string:%s,error code:%d",strerror(errno), errno);
exit(FIFO_OPEN_ERR);
}
// log.logmessage(Info, "server open file done,error string:%s,error code:%d",strerror(errno), errno);
// log.logmessage(Warning, "server open file done,error string:%s,error code:%d",strerror(errno), errno);
//优化后
log(Info, "server open file done,error string:%s,error code:%d",strerror(errno), errno);
log(Warning, "server open file done,error string:%s,error code:%d",strerror(errno), errno);
//......
//开始通信
while(true)
{
char buffer[1024] = {0};
int x = read(fd, buffer, sizeof(buffer));
if(x > 0)
{
buffer[x] = 0;
cout<< "client say# " << buffer <<endl;
}
else if(x == 0)
{
//log.logmessage(Debug, "sclient quit too!,error string:%s,error code:%d",strerror(errno), errno);
//优化后
log(Debug, "sclient quit too!,error string:%s,error code:%d",strerror(errno), errno);
//cout<< "client quit too!\n" <<endl;
break;
}
else break;
}
close(fd);
// //删除命名管道
// int m = unlink(FIFO_FILE);
// if(n == -1)
// {
// perror("unlink");
// exit(FIFO_DELETE_ERR);
// }
return 0;
}
匿名管道与命名管道的区别
- 匿名管道由pipe函数创建并打开。
- 命名管道由mkfifo函数创建,打开用open
- FIFO(命名管道)与pipe(匿名管道)之间唯一的区别在它们创建与打开的方式不同,一但这些工作完 成之后,它们具有相同的语义。
命名管道的打开规则
- 如果当前打开操作是为读而打开FIFO时
- O_NONBLOCK disable:阻塞直到有相应进程为写而打开该FIFO
- O_NONBLOCK enable:立刻返回成功
- 如果当前打开操作是为写而打开FIFO时
- O_NONBLOCK disable:阻塞直到有相应进程为读而打开该FIFO
- O_NONBLOCK enable:立刻返回失败,错误码为ENXIO
system V共享内存
详细看这里:
共享内存区是最快的IPC形式。一旦这样的内存映射到共享它的进程的地址空间,这些进程间数据传递不再涉及到 内核,换句话说是进程不再通过执行进入内核的系统调用来传递彼此的数据
共享内存示意图
共享内存数据结构
struct shmid_ds {
struct ipc_perm shm_perm; /* operation perms */
int shm_segsz; /* size of segment (bytes) */
__kernel_time_t shm_atime; /* last attach time */
__kernel_time_t shm_dtime; /* last detach time */
__kernel_time_t shm_ctime; /* last change time */
__kernel_ipc_pid_t shm_cpid; /* pid of creator */
__kernel_ipc_pid_t shm_lpid; /* pid of last operator */
unsigned short shm_nattch; /* no. of current attaches */
unsigned short shm_unused; /* compatibility */
void *shm_unused2; /* ditto - used by DIPC */
void *shm_unused3; /* unused */
};
共享内存函数
shmget函数
功能:用来创建共享内存
原型
int shmget(key_t key, size_t size, int shmflg);
参数
key:这个共享内存段名字
size:共享内存大小
shmflg:由九个权限标志构成,它们的用法和创建文件时使用的mode模式标志是一样的返回值:成功返回一个非负整数,即该共享内存段的标识码;失败返回-1
shmat函数
功能:将共享内存段连接到进程地址空间
原型
void *shmat(int shmid, const void *shmaddr, int shmflg);
参数
shmid: 共享内存标识
shmaddr:指定连接的地址
shmflg:它的两个可能取值是SHM_RND和SHM_RDONLY
返回值:成功返回一个指针,指向共享内存第一个节;失败返回-1
- 说明:
shmaddr为NULL,核心自动选择一个地址
shmaddr不为NULL且shmflg无SHM_RND标记,则以shmaddr为连接地址。
shmaddr不为NULL且shmflg设置了SHM_RND标记,则连接的地址会自动向下调整为SHMLBA的整数倍。公式:shmaddr - (shmaddr % SHMLBA)
shmflg=SHM_RDONLY,表示连接操作用来只读共享内存
shmdt函数
功能:将共享内存段与当前进程脱离
原型
int shmdt(const void *shmaddr);
参数
shmaddr: 由shmat所返回的指针
返回值:成功返回0;失败返回-1
注意:将共享内存段与当前进程脱离不等于删除共享内存段
shmctl函数
功能:用于控制共享内存
原型
int shmctl(int shmid, int cmd, struct shmid_ds *buf);
参数
shmid:由shmget返回的共享内存标识码
cmd:将要采取的动作(有三个可取值)
buf:指向一个保存着共享内存的模式状态和访问权限的数据结构返回值:成功返回0;失败返回-1
命令 | 说明 |
IPC_STAT | 把shmidds结构中的数据设置为共享内存的当前关联值 |
IPC_SET | 在进程有足够权限的前提下,把共享内存的当前关联值设置为Shmidds数据结构中给出的值 |
IPC_RMID | 删除共享内存段 |
自己总结
共享内存
文件
shmget
申请一个共享V的内存,从内存中开辟一段空间
第二个参数:创建共享内存的大小(问题1),单位是字节
在man中输入这个,这样就可以找到,错了返回一个-1,对了返回共享内存标识符(问题2,与文件描述符有关系吗)
第三个参数可以暂时选这两个
权限问题:
你怎么保证让不同的进程看到同一个共享内存呢?
你怎么知道这个共享内存存在还是存在呢???
答:key来保证,唯一标识,key也是唯一的
路径也有唯一性
怎么形成一个key(ftok)
转化一个路径名和一个项目的标识符变成一个System V IPC的key
一个路径字符串,一个叫项目id(由用户自由指定)
key其实是啥不重要,只要能保持唯一性就好
创建共享内存也是有可能失败
使两个通信的进程看到同一个key
pathname和proj_id随便写,一般不会冲突
获取共享内存
创建一个key
shmget中的三个参数,第一个key需要先创建一个key,-1创建失败,创建失败最好再把日志打印出来(用c_str!!!!!!!!)
#pragma once
#include <iostream>
#include <unistd.h>
#include <sys/types.h>
#include <sys/ipc.h>
using namespace std;
const string pathname = "/home/ljw";
const int proj_id = 0x99999;
int GetShareMen()
{
int shmid = shmget();
}
key_t GetKey()
{
key_t k = ftok(pathname.c_str(), proj_id);
if(k < 0)
{
exit(1);
}
return k;
}
把log.hpp(日志)拷贝进来,日志也写上,可变参数和printf类似
Info就是正常创建成功了,log.hpp中默认是往屏幕上打印
key有后就可以完善GetShareMem中的shmget
GetShareMem,key有了,共享内存也创建成功了,创建成功返回共享内存的标识符 ,失败-1返回,创建一个全新的共享内存
先把第二个参数创建一下
返回共享内存的标识符
创建成功了,就Info,返回共享内存的标识符
两个文件里都是共同的头文件,调用共同的key
还是为了这个本质
测试一下
创建失败的话可以改一下数字
key vs shmid
进程退了共享内存还存在
ipcs -m 查看共享内存的资源,进程退了还存在
关掉共享内存,用shmid删除(ipcrm)不行要用key
用户层统一用shmid删除,key有操作系统控制
16进制打印key
perms权限问题和nattch关联问题
添加权限
这样就是一个创建(全新的共享内存)一个获取(存在的共享内存)
创建新的就CreateShm
内存大小
申请多少就能用多少,虽然操作系统给了2倍的
shmat叫做挂接
让当前进程和指定的共享内存进行关联起来
第一个:参数就是上面获取的shmid,
第二个:你想挂接到共享区的什么位置,不知道,由系统去决定就可以了,填null
第三个:共享内存的默认权限,设置为0就行
返回值是void*,跟malloc类似,需要强转,在虚拟地址空间创建的
挂接起来:attach挂接
运行后,CreateShm创建一个共享内存,创建好以后,5秒以后,就会发现自己的进程就把当前的共享内存挂接到地址空间了,挂接到地址空间之后,就能看到我们对应的,nattch的0就会变1,又过5秒进程退出后,nattch就变成0了
去关联shmdt
只需要起始的地址就可以释放,返回值也是成功返回0,失败返回1
去关联
申请内存,关联,去关联完成
释放共享内存(shmctl)
第一个:参数,共享内存的ip
#include "comm.hpp"
int main()
{
int shmid = CreateShm();
log(Debug, "createShm done...");
sleep(5);
char *shmaddr = (char*)shmat(shmid, nullptr, 0);
log(Debug, "attach shm done...");
sleep(5);
shmdt(shmaddr);
log(Debug, "detach shm done,shmaddr:0x%x...", shmaddr);
sleep(5);
shmctl(shmid, IPC_RMID, nullptr);
log(Debug, "destory shm done,shmaddr:0x%x...", shmaddr);
sleep(5);
return 0;
}
开始让两个进程通信
a来进程创建,b就不用创建,只需要获取就行,也要挂接
b中也不用删除,a删除就可以
测试
要让a先跑要创建,两个都挂接成功nattch就变成2了
目前为止还没有通信
有没有通信呢???没有!
让不同进程看到同一个共享资源!
a的通信代码在这里
b的在这里
写一个最简单的通信
这就是通信了
b中输入,这样就可以通信了
1和2的区别
b中这样更简单,直接写进去共享内存里
processa会一直读,不会管b写没写
小结
a不会等待b,a会一直读,不会跟管道一样,没数据还会等等你
为什么速度最快:拷贝少
跟管道比
首先自己要用用户层缓冲区,还得把用户层缓冲区拷贝到管道里,(从键盘里输入数据到用户层缓冲区里面),然后用户层缓冲区通过系统调用(write)写到管道里,然后再通过read系统调用,被对方(读端)读取,就要从管道拷贝到读端,然后再显示到显示器上。
看看共享内存的属性(没有同步机制)
管道有同步机制
获取共享内存的属性
把管道移入(实现同步问题)(用管道通知)
把这个(创建和释放管道)
放进这里
再打开管道文件,就可以对管道文件进行读写了
记得关掉
b中以写的方式打开
双方通信要怎么通呢
b中往管道里写入一个字符
a中的写这个进行读,b中如果不输入,则a会一直在read这阻塞
测试:先a运行,创建好共享内存,但阻塞了,等b输入
阻塞在这,不会像只有共享内存那样一直读
b输入后a才会显示,不输入,你就要等我
b(ctrl C)后,read就读到0了,就break了(实现同步问题)以为原来,a不管b写不写,都会读
用到的系统调用接口
创建成功返回一个消息队列标识符,否则返回-1
消息队列和信号量(通信方式)