文章目录
创建子进程
函数fork:
#include <unistd.h>
pid_t fork(void);
说明:
- 创建新的进程,失败时返回-1;
- 成功时父进程返回子进程的进程号,子进程返回0;
- 通过fork的返回值区分父进程和子进程;
程序示例:
pid_t pid;
if ((pid = fork()) < 0) {
perror(“fork”);
return -1;
}
else if (pid == 0) {
printf(“child process : my pid is %d\n”, getpid());
}
else {
printf(“parent process : my pid is %d\n”, getpid());
}
程序通过fork()之后的主进程创建了一个新子进程,而实际上新的子进程执行的代码是fork()之后的代码,相当于fork()之后创建的新子进程将其后的代码都复制过来进行执行,所以需要fork()的返回值(也就是进程pid)来区分父进程和子进程的运行;
父进程和子进程的关系:
- 子进程继承了全部父进程的内容,但只从fork之后的代码开始执行
- 父子进程有独立的地址空间,互不影响
- 若父进程先结束:
- 子进程成为孤儿进程,被init进程收养
- 子进程变成后台进程
- 若子进程先结束:
- 父进程如果没有及时回收,子进程变成僵尸进程
- 运行时父进程和子进程运行顺序由操作系统调度
进程结束
函数exit/_exit():
#include <stdlib.h>
#include <unistd.h>
void exit(int status);
void _exit(int status);
void _Exit(int status);
说明:
- 结束当前的进程并将status返回
- exit结束进程时会刷新(流)缓冲区
exit函数结束进程刷新(流)缓冲区示例:
int main(void) {
printf(“this process will exit”);
exit(0);
printf(“never be displayed”);
}
编译执行之后输出为:
this process will be exit
进程回收
进程回收函数wait():
#include <sys/wait.h>
pid_t wait(int *status);
说明:
- 成功时返回回收的子进程的进程号;失败时返回EOF
- 若子进程没有结束,父进程一直阻塞
- 若有多个子进程,哪个先结束就先回收
- status 指定保存子进程返回值和结束方式的地址
- status为NULL表示直接释放子进程PCB(进程控制块),不接收返回值
进程回收和结束之间的关系:
子进程通过exit / _exit / return 返回某个值(0-255),父进程调用wait(&status) 回收,前面提到,如果子进程结束,但父进程不去回收,子进程就会成为僵尸进程被系统挂起;
- WIFEXITED(status) 判断子进程是否正常结束
- WEXITSTATUS(status) 获取子进程返回值
- WIFSIGNALED(status) 判断子进程是否被信号结束
- WTERMSIG(status) 获取结束子进程的信号类型
进程回收函数wait()使用示例:
int status;
pid_t pid;
if ((pid = fork()) < 0) {
perror(“fork”);
exit(-1);
}
else if (pid == 0) {
sleep(1);
exit(2);
}
else {
wait(&status);
printf(“%x\n”, WEXITSTATUS(status));
}
进程回收函数waitpid():
#include <sys/wait.h>
pid_t waitpid(pid_t pid, int *status, int option);
说明:
- 成功时返回回收的子进程的pid或0;失败时返回EOF
- pid可用于指定回收哪个子进程或任意子进程
- status指定用于保存子进程返回值和结束方式的地址
- option指定回收方式,0 或 WNOHANG
练习
实现一个进程链,父进程->子进程->孙进程->重孙进程->重重孙进程
#include <sys/types.h>
#include <unistd.h>
#include <stdio.h>
int main(){
pid_t pid;
printf("I am A,mypid=%d\n",getpid());
pid=fork();//创建子进程B
if(pid==0){
printf("I am B,mypid=%d\n",getpid());
pid_t pid1=fork();//创建孙子进程C
if(pid1==0){
printf("I am C,mypid=%d\n",getpid());
pid_t pid2=fork();//创建重孙进程D
if(pid2==0){
printf("I am D,mypid=%d\n",getpid());
pid_t pid3=fork();//创建重重孙进程E
if(pid3==0){
printf("I am E,mypid=%d\n",getpid());
}
}
}
}
return 0;
}
进程执行
exec函数族
- 进程调用exec函数族执行某个程序
- 进程当前内容被指定的程序替换
- 实现让父子进程执行不同的程序
- 父进程创建子进程
- 子进程调用exec函数族
- 父进程不受影响
execl / execlp 函数:
#include <unistd.h>
int execl(const char *path, const char *arg, …);
int execlp(const char *file, const char *arg, …);
- 成功时执行指定的程序;失败时返回EOF
- path 执行的程序名称,包含路径
- arg… 传递给执行的程序的参数列表
- file 执行的程序的名称,在PATH中查找
使用示例:
if (execl(“/bin/ls”, “ls”, “-a”, “-l”, “/etc”, NULL) < 0) {
perror(“execl”);
}
if (execlp(“ls”, “ls”, “-a”, “-l”, “/etc”, NULL) < 0) {
perror(“execlp”);
}
*最后一个参数必须用空指针NULL结束
execv / execvp 函数:
#include <unistd.h>
int execv(const char *path, char *const argv[]);
int execvp(const char *file, char *const argv[]);
- 成功时执行指定的程序;失败时返回EOF
- arg… 封装成指针数组的形式
使用示例:
char *arg[] = {“ls”, “-a”, “-l”, “/etc”, NULL};
if (execv(“/bin/ls”, arg) < 0) {
perror(“execv”);
}
if (execvp(“ls”, arg) < 0) {
perror(“execvp”);
}
*execv / execvp 函数相较于execl / execlp 函数,就相当于把后续的参数输入封装成了字符串数组形式
system 函数:
#include <stdlib.h>
int system(const char *command);
- 成功时返回命令command的返回值;失败时返回EOF
- 当前进程等待command执行结束后才继续执行
*system 函数里面直接加命令参数即可
守护进程
守护进程(Daemon Process)是Linux三种进程类型之一;
是 Linux 中的后台服务进程;
是一个生存期较长的进程,通常独立于控制终端并且周期性地执行某种任务或等待处理某些发生的事件;
相关概念
进程组(Process Group): 进程集合,每个进程组有一个组长(Leader),其进程 ID 就是该进程组 ID。
会话(Session): 进程组集合,每个会话有一个组长,其进程 ID 就是该会话组 ID。
控制终端(Controlling Terminal):每个会话可以有一个单独的控制终端,与控制终端连接的 Leader 就是控制进程(Controlling Process)。
创建守护进程的步骤
-
创建子进程,父进程退出
if (fork() > 0) { exit(0); }
- 子进程变成孤儿进程,被init进程收养;
- 子进程在后台运行;
-
子进程创建新会话
if (setsid() < 0) { exit(-1); }
- 子进程成为新的会话组长
- 子进程脱离原先的终端
-
更改当前工作目录
chdir(“/”); chdir(“/tmp”);
- 守护进程一直在后台运行,其工作目录不能被卸载
- 重新设定当前工作目录cwd
-
重设文件权限掩码
if (umask(0) < 0) { exit(-1); }
- 文件权限掩码设置为0
- 只影响当前进程
-
关闭打开的文件描述符
int i; for(i=0; i<3; i++) { close(i); }
- 关闭所有从父进程继承的打开文件
- 已脱离终端,stdin / stdout / stderr无法再使用
setsid函数:
pid_t setsid(void);
成功:返回调用进程的会话ID;失败:-1,设置errno。
调用了setsid函数的进程,既是新的会长,也是新的组长
getsid函数:
pid_t getsid(pid_t pid)
成功:返回调用进程的会话ID;失败:-1,设置errno
- pid为0表示察看当前进程session ID
- ps ajx命令查看系统中的进程。参数a表示不仅列当前用户的进程,也列出所有其他用户的进程,参数x表示不仅列有控制终端的进程,也列出所有无控制终端的进程,参数j表示列出与作业控制相关的信息。
- 组长进程不能成为新会话首进程,新会话首进程必定会成为组长进程。
getpgid函数:
pid_t getpgid(pid_t pid);
获取进程组id
GDB调试多进程程序
gcc 编译时加上-g参数:
gcc -g hello.c -o hello
然后gdb进行调试:
gdb hello
在gdb界面中输入start进行单步调试,run是全部运行;
调试多进程方法:
set follow-fork-mode child 设置GDB调试子进程
set follow-fork-mode parent 设置GDB调试父进程
set detach-on-fork on/off 设置GDB跟踪调试单个进程或多个
说明:
- on: 只调试父进程或子进程的其中一个,(根据follow-fork-mode来决定),这是默认的模式
- off:父子进程都在gdb的控制之下,其中一个进程正常调试(根据follow-fork-mode来决定),另一个进程会被设置为暂停状态。
info inferiors 显示GDB调试的进程
inferiors 进程序号(1,2,3…) 切换GDB调试的进程
线程的创建和回收
进程和线程的对比:
线程特点:
- 通常线程指的是共享相同地址空间的多个任务
- 使用多线程的好处:
- 大大提高了任务切换的效率
- 避免了额外的TLB & cache的刷新
一个进程中的多个线程共享以下资源:可执行的指令、静态数据、进程中打开的文件描述符、当前工作目录、用户ID、用户组ID
每个线程私有的资源包括:线程ID (TID)、PC(程序计数器)和相关寄存器、堆栈、错误号 (errno)、优先级、执行状态和属性
Linux线程库
pthread线程库中提供了如下基本操作:
- 创建线程
- 回收线程
- 结束线程
同步和互斥机制:
- 信号量
- 互斥锁
线程创建
pthread_create()函数
#include <pthread.h>
int pthread_create(pthread_t *thread, const
pthread_attr_t *attr, void *(*routine)(void *), void *arg);
- 成功返回0,失败返回错误码
- thread表示线程对象
- attr表示线程属性,NULL代表默认属性
- routine表示线程执行的函数
- arg表示传递给routine的参数 ,参数是void * ,需要注意传递参数格式
*使用pthread库时,如果出现error: ld链接错误,需要在编译过程中加上-lpthread进行动态链接
注意:主线程退出,其创建的子线程也会退出;而线程创建需要时间,如果主进程先行退出,那么线程就无法执行
线程结束
pthread_exit()函数
#include <pthread.h>
void pthread_exit(void *retval);
- 结束当前线程
- retval可被其他线程通过pthread_join获取
- 线程私有资源被释放
获取线程id:
- 通过pthread_create()的第一个参数
- 通过在线程中使用pthread_self()
#include <pthread.h>
pthread_t pthread_self(void);
线程回收
pthread_join()函数
#include <pthread.h>
int pthread_join(pthread_t thread, void **retval);
对于一个默认属性的线程 A 来说,线程占用的资源并不会因为执行结束而得到释放
- 成功返回0,失败时返回错误码
- thread 要回收的线程对象
- 调用线程阻塞直到thread结束,即子线程未exit前,pthread_join()之后的代码不会执行
- retval 接收线程thread的返回值
线程分离
为了防止在多线程程序中回收线程时,产生某个线程未结束导致整个多线程回收任务阻塞的问题,引入了线程分离了方法
线程分离:指定该状态,线程主动与主控线程断开关系。线程结束后(不会产生僵尸线程),也就不用通过pthread_join()回收资源
方法一、pthead_detach()函数
#include <pthread.h>
int pthread_detach(pthread_t thread);
方法二、创建线程前,先设置线程属性为分离
pthread_attr_t attr; /*通过线程属性来设置游离态(分离态)*/
pthread_attr_init(&attr);
pthread_attr_setdetachstate(&attr, PTHREAD_CREATE_DETACHED);
*如果不设置线程属性,默认属性是需要进行线程回收的,线程回收部分有提到
线程取消(杀死线程)
pthread_cancel()函数
#include <pthread.h>
int pthread_cancel(pthread_t thread);
注意,线程的取消必须要求线程具有取消点,取消点主要是**阻塞系统的调用,**比如sleep()等过程;
如果没有取消点,则可以使用pthread_testcancel()函数创造一个取消点;
void pthread_testcancel(void);
将子线程任务进行部分取消,可以使用pthread_setcancelstate()函数;
int pthread_setcancelstate(int state, int *oldstate);
state参数:
- PTHREAD_CANCEL_ENABLE—可以被取消
- PTHREAD_CANCEL_DISABLE—不能被取消
一般就在子线程函数相应流程前进行:
//延迟五秒后线程可以被取消
pthread_setcancelstate(PTHREAD_CANCEL_DISABLE, NULL);
sleep(5);
pthread_setcancelstate(PTHREAD_CANCEL_ENABLE, NULL);
设置取消类型,pthread_setcanceltype()函数
int pthread_setcanceltype(int type, int *oldtype);
type参数:
- PTHREAD_CANCEL_DEFERRED—-等到取消点才取消
- PTHREAD_CANCEL_ASYNCHRONOUS—-目标线程回立刻取消
线程的清理
当线程申请了堆空间,又发生异常退出时,如果没有得到清理就会产生内存泄漏;关于线程的清理主要是两个函数:
void pthread_cleanup_push(void (*routine) (void *), void *arg);
void pthread_cleanup_pop(int execute);
这两个一般成对使用;routine函数执行条件:
- 被pthread_cancel取消
- 执行pthread_exit
- 非0参数执行pthread_cleanup_pop
注意:
1、必须成对使用,即使pthread_cleanup_pop不会被执行到也必须写上,否则编译错误。2、pthread_cleanup_pop()被执行且参数为0,pthread_cleanup_push回调函数routine不会被执行.
3、pthread_cleanup_push 和pthread_cleanup_pop可以写多对,routine执行顺序正好相反
4、线程内的return 可以结束线程,也可以给pthread_join返回值,但不能触发pthread_cleanup_push里面的回调函数,所以我们结束线程尽量使用pthread_exit退出线程。
线程的同步和互斥
线程互斥的一些基本概念:
临界资源:一次只允许一个任务(进程、线程)访问的共享资源
临界区:访问临界资源的代码
互斥机制:mutex互斥锁,任务访问临界资源前申请锁,访问完后释放锁
互斥锁初始化
pthread_mutex_init()函数(动态初始化)
#include <pthread.h>
int pthread_mutex_init(pthread_mutex_t *mutex,const pthread_mutexattr_t * attr);
- 成功时返回0,失败时返回错误码
- mutex 指向要初始化的互斥锁对象
- attr 互斥锁属性,NULL表示缺省属性
man 函数出现 No manual entry for pthread_mutex_xxx解决办法:
apt-get install manpages-posix-dev
PTHREAD_MUTEX_INITIALIZER宏定义(静态初始化):
pthread_mutex_t mutex = PTHREAD_MUTEX_INITIALIZER;
锁的申请与释放
锁的申请:
#include <pthread.h>
int pthread_mutex_lock(pthread_mutex_t *mutex);
int pthread_mutex_trylock(pthread_mutex_t *mutex);
- 成功时返回0,失败时返回错误码
- mutex 指向要初始化的互斥锁对象
- pthread_mutex_lock 如果无法获得锁,任务阻塞
- pthread_mutex_trylock 如果无法获得锁,返回EBUSY而不是挂起等待
锁的释放:
#include <pthread.h>
int pthread_mutex_unlock(pthread_mutex_t *mutex);
- 成功时返回0,失败时返回错误码
- mutex 指向要初始化的互斥锁对象
- 执行完临界区要及时释放锁
锁的销毁
int pthread_mutex_destroy(pthread_mutex_t *mutex);
互斥锁应用参考代码
/*
说明:
开启两个线程分别加锁去对一个文件进行写入信息
如果不加锁会导致写入错乱
*/
#include <pthread.h>
#include <stdio.h>
#include <unistd.h>
#include <string.h>
pthread_mutex_t mutex = PTHREAD_MUTEX_INITIALIZER;
FILE *fp;
void *func2(void *arg){
pthread_detach(pthread_self());
printf("This func2 thread\n");
char str[]="I write func2 line\n";
char c;
int i=0;
while(1){
pthread_mutex_lock(&mutex);
while(i<strlen(str))
{
c = str[i];
fputc(c,fp);
usleep(1);
i++;
}
pthread_mutex_unlock(&mutex);
i=0;
usleep(1);
}
pthread_exit("func2 exit");
}
void *func(void *arg){
pthread_detach(pthread_self());
printf("This is func1 thread\n");
char str[]="You read func1 thread\n";
char c;
int i=0;
while(1){
pthread_mutex_lock(&mutex);
while(i<strlen(str))
{
c = str[i];
fputc(c,fp);
i++;
usleep(1);
}
pthread_mutex_unlock(&mutex);
i=0;
usleep(1);
}
pthread_exit("func1 exit");
}
int main(){
pthread_t tid,tid2;
void *retv;
int i;
fp = fopen("1.txt","a+");
if(fp==NULL){
perror("fopen");
return 0;
}
pthread_create(&tid,NULL,func,NULL);
pthread_create(&tid2,NULL,func2,NULL);
while(1){
sleep(1);
}
}
读写锁
必要性:提高线程执行效率
特性:
写者:写者使用写锁,如果当前没有读者,也没有其他写者,写者立即获得写锁;否则写者将等待,直到没有读者和写者。
读者:读者使用读锁,如果当前没有写者,读者立即获得读锁;否则读者等待,直到没有写者。
注意:
- 同一时刻只有一个线程可以获得写锁,同一时刻可以有多个线程获得读锁。
- 读写锁出于写锁状态时,所有试图对读写锁加锁的线程,不管是读者试图加读锁,还是写者试图加写锁,都会被阻塞。
- 读写锁处于读锁状态时,有写者试图加写锁时,之后的其他线程的读锁请求会被阻塞,以避免写者长时间的不写锁
初始化一个读写锁 pthread_rwlock_init
读锁定读写锁 pthread_rwlock_rdlock
非阻塞读锁定 pthread_rwlock_tryrdlock
写锁定读写锁 pthread_rwlock_wrlock
非阻塞写锁定 pthread_rwlock_trywrlock
解锁读写锁 pthread_rwlock_unlock
释放读写锁 pthread_rwlock_destroy
死锁
概念说明:
避免方法:
- 锁越少越好,最好使用一把锁
- 调整好锁的顺序
条件变量
应用场景:线程条件变量是为了解决生产者与消费者问题,是线程同步的一种手段;
必要性:为了实现等待某个资源,让线程进行休眠,从而提高运行效率;
函数:
int pthread_cond_wait(pthread_cond_t *restrict cond,pthread_mutex_t *restrict mutex);
int pthread_cond_timedwait(pthread_cond_t *restrict cond,pthread_mutex_t *restrict mutex,
const struct timespec *restrict abstime);
int pthread_cond_signal(pthread_cond_t *cond);
int pthread_cond_broadcast(pthread_cond_t *cond);
使用步骤:
1、初始化:
静态初始化
pthread_cond_t cond = PTHREAD_COND_INITIALIZER; //初始化条件变量
pthread_mutex_t mutex = PTHREAD_MUTEX_INITIALIZER; //初始化互斥量
或使用动态初始化
pthread_cond_init(&cond);
2、生产资源线程
pthread_mutex_lock(&mutex);
//开始生产资源
pthread_cond_sigal(&cond); //通知一个消费线程
或者
pthread_cond_broadcast(&cond); //广播通知多个消费线程
pthread_mutex_unlock(&mutex);
3、消费者线程
pthread_mutex_lock(&mutex);
while (如果没有资源){ //防止惊群效应
pthread_cond_wait(&cond, &mutex);
}
有资源了,消费资源
pthread_mutex_unlock(&mutex);
注意:
- pthread_cond_wait()在没有资源等待是是先unlock 休眠,等资源到了,再lock;所以pthread_cond_wait() 和 pthread_mutex_lock() 必须配对使用;
- 如果pthread_cond_signal()或者pthread_cond_broadcast()早于 pthread_cond_wait(),则有可能会丢失信号
- pthread_cond_broadcast()信号会被多个线程收到,这叫线程的惊群效应。所以需要加上判断条件while循环
应用示例:
#include <pthread.h>
#include <unistd.h>
#include <stdio.h>
#include <stdlib.h>
pthread_cond_t hasTaxi=PTHREAD_COND_INITIALIZER;
pthread_mutex_t lock = PTHREAD_MUTEX_INITIALIZER;
struct taxi{
struct taxi *next;
int num;
};
struct taxi *Head=NULL;
//生产资源,创建一个taxi资源
void *taxiarv(void *arg){
printf("taxi arrived thread\n");
pthread_detach(pthread_self());
struct taxi *tx;
int i=1;
while(1){
tx = malloc(sizeof(struct taxi));
tx->num = i++;
printf("taxi %d comming\n",tx->num);
pthread_mutex_lock(&lock);
tx->next = Head;
Head = tx;
pthread_cond_signal(&hasTaxi);
pthread_mutex_unlock(&lock);
sleep(1);
}
pthread_exit(0);
}
//消费资源,消耗一个taxi资源
void *takeTaxi(void *arg){
printf("take taxi thread\n");
pthread_detach(pthread_self());
struct taxi *tx;
while(1){
pthread_mutex_lock(&lock);
while(Head==NULL)
{
pthread_cond_wait(&hasTaxi,&lock);
}
tx = Head;
Head=tx->next;
printf("%d,Take taxi %d\n",(int)arg,tx->num);
free(tx);
pthread_mutex_unlock(&lock);
}
pthread_exit(0);
}
int main(){
pthread_t tid1,tid2,tid3;
pthread_create(&tid1,NULL,taxiarv,NULL);
pthread_create(&tid2,NULL,takeTaxi,(void*)1);
pthread_create(&tid2,NULL,takeTaxi,(void*)2);
pthread_create(&tid2,NULL,takeTaxi,(void*)3);
while(1) {
sleep(1);
}
}
线程池
线程池的概念:是一种可以循环的完成任务的一组线程的集合
为什么需要线程池:
我们平时创建一个线程,完成某一个任务,等待线程的退出。但当需要创建大量的线程时,假设T1为创建线程时间,T2为在线程任务执行时间,T3为线程销毁时间,当 T1+T3 > T2,这时候就不划算了,使用线程池可以降低频繁创建和销毁线程所带来的开销,任务处理时间比较短的时候这个好处非常显著。
线程池的基本结构:
- 任务队列,用于存储需要处理的任务,由线程池中的工作线程来处理这些任务;
- 线程池工作线程,处理任务队列中的任务;
线程池的实现步骤:
-
创建线程池的基本结构
任务队列链表
线程池结构体 -
线程池的初始化
pool_init()
{
创建一个线程池结构
实现任务队列互斥锁和条件变量的初始化
创建n个工作线程
} -
线程池添加任务
pool_add_task
{
判断是否有空闲的工作线程
给任务队列添加一个节点
给工作线程发送信号newtask
} -
实现工作线程
workThread
{
while(1){
等待newtask任务信号
从任务队列中删除节点
执行任务
}
} -
线程池的销毁
pool_destory
{
删除任务队列链表所有节点,释放空间
删除所有的互斥锁条件变量
删除线程池,释放空间
}
进程间通信
进程间通信的方式:
无名管道(pipe)
有名管道(fifo)
信号(signal)
共享内存(mmap)
套接字(socket)
无名管道
无名管道的特点:
- 只能用于具有亲缘关系的进程之间(父子进程、兄弟进程)
- 是一种单工的通信模式,具有固定的读写端
- 创建时回返回两个文件描述符,分别用于读写管道
无名管道的创建:
#include <unistd.h>
int pipe(int pfd[2]);
- 成功时返回0,失败时返回EOF
- pfd 包含两个元素的整形数组,用来保存文件描述符
- pfd[0]用于读管道;pfd[1]用于写管道
图例说明:
#include <stdio.h>
#include <unistd.h>
#include <string.h>
int main(){
int pfd[2];
int i;
int re;
char buf[40]={0};
pid_t pid;
re = pipe(pfd);
if(re<0){
perror("pipe");
return 0;
}
printf("%d,%d\n",pfd[0],pfd[1]);
for(i=0;i<2;i++){
pid = fork();
if(pid<0){
perror("fork");
return 0;
}else if(pid>0){
}else{
break;
}
}
if(i==2){
close(pfd[1]);
while(1){
memset(buf,0,40);
re=read(pfd[0],buf,40);
if(re>0){
printf("%s\n",buf);
}
}
return 0;
}
if(i==1){
close(pfd[0]);
while(1){
strcpy(buf,"this is 2 process");
write(pfd[1],buf,strlen(buf));
usleep(930000);
}
return 0;
}
if(i==0){
close(pfd[0]);
while(1){
strcpy(buf,"this is 1 process");
write(pfd[1],buf,strlen(buf));
sleep(1);
}
return 0;
}
}
无名管道特性:
- 读管道
- 管道中有数据,read返回实际读到的字节数
- 管道中无数据
- 管道写端被全部关闭,read返回0
- 写端没有全部被关闭,read阻塞等待
- 写管道
- 管道读端全部被关闭, 进程异常终止
- 管道读端没有全部关闭
- 管道已满,write阻塞(管道大小64K,大小填充满之后会阻塞)
- 管道未满,write将数据写入,并返回实际写入的字节数
有名管道
有名管道特点
- 有名管道可以使非亲缘的两个进程互相通信
- 创建一个管道文件,通过路径名来操作,在文件系统中可见,但内容存放在内存中
- 一般使用文件IO来操作有名管道
- 遵循先进先出规则
- 不支持leek操作
- 单工读写
有名管道的创建
#include <sys/types.h>
#include <sys/stat.h>
int mkfifo(const char *filename, mode_t mode);
open管道文件的参数说明与注意事项
open(const char *path, O_RDONLY);//只读阻塞打开
open(const char *path, O_RDONLY | O_NONBLOCK);//只读非阻塞打开
open(const char *path, O_WRONLY);//只写阻塞打开
open(const char *path, O_WRONLY | O_NONBLOCK);//只写非阻塞打开
注意事项
- 程序不能以O_RDWR(读写)模式打开FIFO文件进行读写操作,而其行为也未明确定义,因为如一个管道以读/写方式打开,进程可以读回自己的输出,同时我们通常使用FIFO只是为了单向的数据传递
- 第二个参数中的选项O_NONBLOCK,选项O_NONBLOCK表示非阻塞,加上这个选项后,表示open调用是非阻塞的,如果没有这个选项,则表示open调用是阻塞的
- 对于以只读方式(O_RDONLY)打开的FIFO文件,如果open调用是阻塞的(即第二个参数为O_RDONLY),除非有一个进程以写方式打开同一个FIFO,否则它不会返回;如果open调用是非阻塞的的(即第二个参数为O_RDONLY | O_NONBLOCK),则即使没有其他进程以写方式打开同一个FIFO文件,open调用将成功并立即返回
- 对于以只写方式(O_WRONLY)打开的FIFO文件,如果open调用是阻塞的(即第二个参数为O_WRONLY),open调用将被阻塞,直到有一个进程以只读方式打开同一个FIFO文件为止;如果open调用是非阻塞的(即第二个参数为O_WRONLY | O_NONBLOCK),open总会立即返回,但如果没有其他进程以只读方式打开同一个FIFO文件,open调用将返回-1,并且FIFO也不会被打开。
- 数据完整性,如果有多个进程写同一个管道,使用O_WRONLY方式打开管道,如果写入的数据长度小于等于PIPE_BUF(4K),那么或者写入全部字节,或者一个字节都不写入,系统就可以确保数据决不会交错在一起
共享内存
概念
- 共享内存可以通过mmap()映射普通文件
- 使得一个磁盘文件与内存中的一个缓冲区实现映射,进程可以像访问普通内存一样对文件进行访问,不再需要调用read,write函数
优点
共享内存是一种用户空间和内核空间的高效交互方式
void *mmap(void *addr, size_t length, int prot, int flags, int fd, off_t offset);
功能:创建共享内存映射
返回值:成功返回创建的映射区首地址,失败返回MAP_FAILED( ((void *) -1) ),设置errno值
参数说明:
- **addr:**指定要映射的内存地址,一般设置为 NULL 让操作系统自动选择合适的内存地址
- **length:**必须>0。映射地址空间的字节数,它从被映射文件开头 offset 个字节开始算起
- **prot:**指定共享内存的访问权限。可取如下几个值的可选:PROT_READ(可读), PROT_WRITE(可写), PROT_EXEC(可执行), PROT_NONE(不可访问)
- **flags:**由以下几个常值指定:MAP_SHARED(共享的) MAP_PRIVATE(私有的), MAP_FIXED(表示必须使用 start 参数作为开始地址,如果失败不进行修正),其中,MAP_SHARED , MAP_PRIVATE必选其一,而 MAP_FIXED 则不推荐使用。MAP_ANONYMOUS(匿名映射,用于血缘关系进程间通信)
- **fd:**表示要映射的文件句柄。如果匿名映射写-1
- **offset:**表示映射文件的偏移量,一般设置为 0 表示从文件头部开始映射
注意事项:
-
创建映射区的过程中,隐含着一次对映射文件的读操作,将文件内容读取到映射区
-
当MAP_SHARED时,要求:映射区的权限应 <=文件打开的权限(出于对映射区的保护),如果不满足报非法参数(Invalid argument)错误
当MAP_PRIVATE时候,mmap中的权限是对内存的限制,只需要文件有读权限即可,操作只在内存有效,不会写到物理磁盘,且不能在进程间共享
-
映射区的释放与文件关闭无关,只要映射建立成功,文件可以立即关闭
-
用于映射的文件大小必须>0,当映射文件大小为0时,指定非0大小创建映射区,访问映射地址会报总线错误,指定0大小创建映射区,报非法参数错误(Invalid argument)
-
文件偏移量必须为0或者4K的整数倍(不是会报非法参数Invalid argument错误)
-
映射大小可以大于文件大小,但只能访问文件page的内存地址,否则报总线错误 ,超出映射的内存大小报段错误
-
mmap创建映射区出错概率非常高,一定要检查返回值,确保映射区建立成功再进行后续操作
共享内存的释放
int munmap(void *addr, size_t length);
返回值:成功返回0,失败返回-1,并设置errno值
参数说明:
- addr:调用mmap函数成功返回的映射区首地址
- length:映射区大小(即:mmap函数的第二个参数)
共享内存参考代码
#include <sys/mman.h>
#include <stdio.h>
#include <unistd.h>
#include <stdlib.h>
#include <string.h>
#include <sys/types.h>
#include <sys/stat.h>
#include <fcntl.h>
#include <sys/wait.h>
int main(){
void *addr;
addr = mmap(NULL,2048, PROT_READ|PROT_WRITE, MAP_SHARED|MAP_ANONYMOUS, -1, 0);
if(addr == MAP_FAILED){
perror("mmap");
return 0;
}
pid_t pid;
pid = fork();
if(pid<0){
perror("fork");
return 0;
}
else if(pid>0){
memcpy(addr,"1234567890",10);
wait(NULL);
}else {
sleep(1);
printf("read father val=%s\n",(char *)addr);
}
munmap(addr,2048);
}
信号机制
概念:
信号是在软件层次上对中断机制的一种模拟,是一种异步通信方式;
Linux内核通过信号通知用户进程,不同的信号类型代表不同的事件;
Linux对早期的unix信号机制进行了扩展,而进程对信号有不同的相应方式:
- 缺省方式
- 忽略信号
- 捕捉信号
信号的产生:
- 按键产生
- 系统调用函数产生(比如raise, kill等)
- 硬件异常
- 命令行产生(kill)
- 软件条件(比如非法访问内存等)
常用信号列举及说明:
信号相关命令
kill/killall
- kill [-signal] pid
- 默认发送SIGTERM
- -signal 可指定信号
- pid 指定发送对象
- kill -l 可以查看[-signal]支持的信号列表
- killall [-u user | prog]
- prog 指定进程名
- user 指定用户名
程序中信号的发送
#include <unistd.h>
#include <signal.h>
int kill(pid_t pid, int sig);
- 成功时返回0,失败时返回EOF
- pid 接收进程的进程号,0代表同组进程; <-1代表(取绝对值)发送信号给该绝对值所对应的进程组的所有组员;-1代表所有进程
- sig 待发送的信号类型
int raise(int sig); //给自己发信号
程序定时器
int alarm(unsigned int seconds);
- 成功时返回上个定时器的剩余时间,失败时返回EOF
- seconds 定时器的时间(秒)
- 一个进程中只能设定一个定时器,时间到时产生SIGALRM
int pause(void);
- 进程一直阻塞,直到被信号中断
- 被信号中断后返回-1,errno为EINTR
useconds_t ualarm(useconds_t usecs, useconds_t interval);
- 以useconds为单位,第一个参数为第一次产生时间,第二个参数为间隔产生,循环发送定时器信号
int setitimer(int which, const struct itimerval *new_value, struct itimerval *old_value);
struct itimerval {
struct timeval it_interval; // 闹钟触发周期
struct timeval it_value; // 闹钟触发时间
};
struct timeval {
time_t tv_sec; /* seconds */
suseconds_t tv_usec; /* microseconds */
};
- 定时的发送alarm信号
- which参数:
- ITIMER_REAL:以逝去时间递减;发送SIGALRM信号
- 计算进程(用户模式)执行的时间; 发送SIGVTALRM信号
- ITIMER_PROF: 进程在用户模式(即程序执行时)和核心模式(即进程调度用时)均计算时间。 发送SIGPROF信号
- new_value参数: 负责设定 timout 时间
- old_value参数: 存放旧的timeout值,一般指定为NULL
信号的捕捉
实现信号捕捉的步骤:
- 定义新的信号的执行函数handle
- 使用signal/sigaction 函数,把自定义的handle和指定的信号相关联
signal函数:
typedef void (*sighandler_t)(int);
sighandler_t signal(int signum, sighandler_t handler);
- 功能:捕捉信号执行自定义函数
- 返回值:成功时返回原先的信号处理函数,失败时返回SIG_ERR
- 参数:
- signum 要设置的信号类型
- handler 指定的信号处理函数: SIG_DFL代表缺省方式; SIG_IGN 代表忽略信号;
参考示例:
#include <signal.h>
#include <stdio.h>
#include <unistd.h>
#include <stdlib.h>
#include <string.h>
#include <linux/posix_types.h>
typedef void (*sighandler_t)(int);
sighandler_t oldact;
void handle(int sig){
printf("I cath the SIGINT \n");
//执行之后还原原先的信号处理函数行为
signal(SIGINT,oldact);
}
int main(){
//接收到SIGINT信号之后执行handle,并将原先的信号处理函数oldact接收方便还原
oldact = signal(SIGINT,handle);
while(1){
sleep(1);
}
}
sigaction函数:
int sigaction(int signum, const struct sigaction *act,struct sigaction *oldact);
struct sigaction {
void (*sa_handler)(int);
void (*sa_sigaction)(int, siginfo_t *, void *);
sigset_t sa_mask;
int sa_flags;
void (*sa_restorer)(void);
}
- 参数:
- signum:处理的信号
- act,oldact: 处理信号的新行为和旧的行为,是一个sigaction结构体
- sigaction结构体成员定义如下:
- sa_handler: 是一个函数指针,其含义与 signal 函数中的信号处理函数类似
- sa_sigaction: 另一个信号处理函数,它有三个参数,可以获得关于信号的更详细的信息
- sa_mask:是一个信号集,在调用该信号捕捉函数之前,将需要block的信号加入这个sa_mask,仅当信号捕捉函数正在执行时,才阻塞sa_mask中的信号,当从信号捕捉函数返回时进程的信号屏蔽字复位为原先值
- sa_flags参考值如下:
- SA_SIGINFO:使用 sa_sigaction 成员而不是 sa_handler 作为信号处理函数
- SA_RESTART:使被信号打断的系统调用自动重新发起
- SA_RESETHAND:信号处理之后重新设置为默认的处理方式
- SA_NODEFER:使对信号的屏蔽无效,即在信号处理函数执行期间仍能发出这个信号
- se_restorer:是一个已经废弃的数据域
*Linux系统更建议使用sigaction函数,因为在不同unix版本中,signal函数表现可能不一致
使用sigaction和setitimer进行定时器函数的实现示例:
#include <signal.h>
#include <stdio.h>
#include <unistd.h>
#include <stdlib.h>
#include <string.h>
#include <linux/posix_types.h>
#include <sys/time.h>
typedef void (*sighandler_t)(int);
sighandler_t oldact;
void handle(int sig){
printf("second timer \n");
}
int main(){
struct sigaction act;
act.sa_handler = handle;
act.sa_flags = 0;
sigemptyset(&act.sa_mask);
struct itimerval timevalue;
//程序开始后5s发送SIGALRM信号,之后每隔一秒再发送一次
timevalue.it_interval.tv_sec = 1;
timevalue.it_interval.tv_usec = 0;
timevalue.it_value.tv_sec = 5;
timevalue.it_value.tv_usec = 0;
setitimer(ITIMER_REAL,&timevalue, NULL);
sigaction(SIGALRM,&act,NULL);
while(1){
}
}
使用SIGCHLD信号实现回收子进程
SIGCHLD的产生条件
- 子进程终止时
- 子进程接收到SIGSTOP信号停止时
- 子进程处在停止态,接受到SIGCONT后唤醒时
示例程序:
#include <stdio.h>
#include <signal.h>
#include <sys/wait.h>
#include <unistd.h>
#include <stdlib.h>
void handle(int sig){
//子进程结束时的SIGCHLD信号收到之后执行wait回收子进程
//可以方式wait阻塞父进程
wait(NULL);
printf("Get sig =%d\n",sig);
}
int main(){
pid_t pid;
struct sigaction act;
act.sa_handler = handle;
act.sa_flags = 0;
sigemptyset(&act.sa_mask);
pid = fork();
if(pid>0){
//wait(NULL);
//父进程运行并等待子进程结束时的SIGCHLD信号
sigaction(SIGCHLD,&act,NULL);
while(1){
printf("this is father process\n");
sleep(1);
}
}else if(pid==0){
sleep(5);
exit(0);
}
}
信号集、信号的阻塞
有时候不希望在接到信号时就立即停止当前执行,去处理信号,同时也不希望忽略该信号,而是延时一段时间去调用信号处理函数。这种情况可以通过阻塞信号实现
信号的阻塞:
信号的”阻塞“是一个开关动作,指的是阻止信号被处理,但不是阻止信号产生
#include <signal.h>
int sigprocmask( int how, const sigset_t *restrict set, sigset_t *restrict oset );
- 返回值:若成功则返回0,若出错则返回-1
- 首先,若oset是非空指针,那么进程的当前信号屏蔽字通过oset返回
- 其次,若set是一个非空指针,则参数how指示如何修改当前信号屏蔽字
- how可选用的值:(注意,不能阻塞SIGKILL和SIGSTOP信号)
- SIG_BLOCK : 把参数set中的信号添加到信号屏蔽字中
- SIG_UNBLOCK: 从信号屏蔽字中删除参数set中的信号
- SIG_SETMASK: 把信号屏蔽字设置为参数set中的信号
示例程序:
#include <signal.h>
#include <stdio.h>
#include <stdlib.h>
#include <unistd.h>
void handle(int sig){
printf("I get sig=%d\n",sig);
}
int main(){
struct sigaction act;
act.sa_handler = handle;
sigemptyset(&act.sa_mask);
act.sa_flags = 0;
sigaction(SIGINT,&act,NULL);
sigset_t set;
sigemptyset(&set);
sigaddset(&set,SIGINT);
sigprocmask(SIG_BLOCK,&set,NULL);
sleep(5);
sigprocmask(SIG_UNBLOCK,&set,NULL);
while(1){
sleep(1);
}
}
pause函数
int pause(void);
进程一直阻塞,直到被信号中断,返回值:-1 并设置errno为EINTR
- 如果信号的默认处理动作是终止进程,则进程终止,pause函数么有机会返回
- 如果信号的默认处理动作是忽略,进程继续处于挂起状态,pause函数不返回
- 如果信号的处理动作是捕捉,则调用完信号处理函数之后,pause返回-1
- pause收到的信号如果被屏蔽,那么pause就不能被唤醒
sigsuspend函数
int sigsuspend(const sigset_t *sigmask);
功能:将进程的屏蔽字替换为由参数sigmask给出的信号集,然后挂起进程的执行
- sigmask:希望屏蔽的信号
消息队列
概念和特点:
- 消息队列是System V IPC对象的一种
- 消息队列由消息队列ID来唯一标识
- 消息队列就是一个消息的列表。用户可以在消息队列中添加消息、读取消息等
- 消息队列可以按照类型来发送/接收消息
使用步骤:
- 打开/创建消息队列
- 向消息队列发送消息
- 从消息队列接收消息
- 控制消息队列
消息队列创建/打开
#include <sys/ipc.h>
#include <sys/msg.h>
int msgget(key_t key, int msgflg);
- 成功时返回消息队列的id,失败时返回EOF
- key 和消息队列关联的key IPC_PRIVATE 或 ftok()
- msgflg 标志位 IPC_CREAT|0666
程序示例:
……
int main() {
int msgid;
key_t key;
if ((key = ftok(“.”, ‘q’)) == -1) {
perror(“ftok”);
exit(-1);
}
if ((msgid = msgget(key, IPC_CREAT|0666)) < 0) {
perror(“msgget”);
exit(-1);
}
……
return 0;
}
消息发送
#include <sys/ipc.h>
#include <sys/msg.h>
int msgsnd(int msgid, const void *msgp, size_t size,int msgflg);
- 成功时返回0,失败时返回-1
- msgid 消息队列id
- msgp 消息缓冲区地址
- size 消息正文长度
- msgflg 标志位 0 或 IPC_NOWAIT
消息格式
- 通信双方首先定义好统一的消息格式
- 用户根据应用需求定义结构体类型
- 首成员类型必须为long,代表消息类型(正整数)
- 其他成员都属于消息正文
- 消息长度不包括首类型 long
示例:
typedef struct{
long msg_type;
char buf[128];
}msgT;
注意:
- 消息结构必须有long类型的msg_type字段,表示消息的类型
- 消息长度不包括首类型 long
消息的接收
#include <sys/ipc.h>
#include <sys/msg.h>
int msgrcv(int msgid, void *msgp, size_t size, long msgtype, int msgflg);
- 成功时返回收到的消息长度,失败时返回-1
- 参数说明:
-
msgid 消息队列id
-
msgp 消息缓冲区地址
-
size 指定接收的消息长度
-
msgtype 指定接收的消息类型:
-
msgtype=0:收到的第一条消息,任意类型
-
msgtype>0:收到的第一条 msg_type类型的消息
-
msgtype<0:接收类型等于或者小于msgtype绝对值的第一个消息
例如msgtype=-4,只接受类型是1、2、3、4的消息
-
-
msgflg 标志位:
- 0:阻塞式接收消息
- IPC_NOWAIT:如果没有返回条件的消息调用立即返回,此时错误码为ENOMSG
- MSG_EXCEPT:与msgtype配合使用返回队列中第一个类型不为msgtype的消息
-
消息队列的控制
#include <sys/ipc.h>
#include <sys/msg.h>
int msgctl(int msgid, int cmd, struct msqid_ds *buf);
- 成功时返回0,失败时返回-1
- 参数说明:
- msgid 消息队列id
- cmd 要执行的操作 IPC_STAT / IPC_SET / IPC_RMID(删除)
- buf 存放消息队列属性的地址
消息队列参考代码:
#include <stdio.h>
#include <sys/ipc.h>
#include <sys/msg.h>
#include <string.h>
typedef struct{
long msg_type;
char buf[128];
}msgT;
#define MSGLEN (sizeof(msgT)-sizeof(long))
int main(){
key_t key;
int msgid;
int ret;
msgT msg;
key = ftok(".",100);
if(key<0){
perror("ftok");
return 0;
}
msgid = msgget(key,IPC_CREAT|0666);
if(msgid<0){
perror("msgget");
return 0;
}
msg.msg_type = 1;
strcpy(msg.buf,"this msg type 1");
ret = msgsnd(msgid,&msg,MSGLEN,0);
if(ret<0){
perror("msgsnd");
return 0;
}
msg.msg_type = 2;
strcpy(msg.buf,"this msg type 2");
ret = msgsnd(msgid,&msg,MSGLEN,0);
if(ret<0){
perror("msgsnd");
return 0;
}
msg.msg_type = 3;
strcpy(msg.buf,"this msg type 3");
ret = msgsnd(msgid,&msg,MSGLEN,0);
if(ret<0){
perror("msgsnd");
return 0;
}
msg.msg_type = 4;
strcpy(msg.buf,"this msg type 4");
ret = msgsnd(msgid,&msg,MSGLEN,0);
if(ret<0){
perror("msgsnd");
return 0;
}
msg.msg_type = 5;
strcpy(msg.buf,"this msg type 5");
ret = msgsnd(msgid,&msg,MSGLEN,0);
if(ret<0){
perror("msgsnd");
return 0;
}
}
#include <stdio.h>
#include <sys/ipc.h>
#include <sys/msg.h>
#include <string.h>
typedef struct{
long msg_type;
char buf[128];
}msgT;
#define MSGLEN (sizeof(msgT)-sizeof(long))
int main(){
int msgid;
key_t key;
msgT msg;
int ret;
key = ftok(".",100);
if(key<0){
perror("ftok");
return 0;
}
msgid = msgget(key,IPC_CREAT|0666);
if(msgid<0){
perror("msgget");
return 0;
}
int count=0;
while(1){
ret = msgrcv(msgid,&msg,MSGLEN,0,0);
if(ret<0){
perror("msgrcv");
return 0;
}
count++;
if(count>3){
break;
}
printf("receiv msg type=%d,buf=%s\n",(int)msg.msg_type,msg.buf);
}
ret = msgctl(msgid,IPC_RMID,NULL);
if(ret<0){
perror("msgctl");
return 0;
}
}
信号灯/信号量
信号量代表某一类资源,其值表示系统中该资源的数量;信号量是一个受保护的变量,只能通过三种操作来访问:
- 初始化
- P操作(申请资源)
- V操作(释放资源)
P/V操作
P(S) 含义如下:
if (信号量的值大于0) {
申请资源的任务继续运行;
信号量的值减一;
}
else { 申请资源的任务阻塞;}
V(S) 含义如下:
信号量的值加一;
if (有任务在等待资源) {
唤醒等待的任务,让其继续运行
}
信号灯种类:
- Posix 有名信号灯
- Posix 无名信号灯
- System V 信号灯
其中有名信号灯和无名信号灯的使用:
有名信号灯的打开:
sem_t *sem_open(const char *name, int oflag);
sem_t *sem_open(const char *name, int oflag,mode_t mode, unsigned int value);
- 参数:
- name:name是给信号灯起的名字
- oflag:打开方式,常用O_CREAT
- mode:文件权限。常用0666
- value:信号量值。二元信号灯值为1,普通表示资源数目
- 信号灯文件位置:/dev/shm
有名信号灯的关闭:
int sem_close(sem_t *sem);
有名信号灯的删除:
int sem_unlink(const char* name);
无名信号灯初始化:
int sem_init(sem_t *sem, int shared, unsigned int value);
- 参数:
- sem:需要初始化的信号灯变量
- shared:shared指定为0,表示信号量只能由初始化这个信号量的进程使用,不能在进程间使用,linux 不支持进程间同步
- value:信号量的值
无名信号灯销毁:
int sem_destroy(sem_t* sem);
信号灯P操作:
int sem_wait(sem_t *sem);
获取资源,如果信号量为0,表示这时没有相应资源空闲,那么调用线程就将挂起,直到有空闲资源可以获取
信号灯V操作:
int sem_post(sem_t *sem);
释放资源,如果没有线程阻塞在该sem上,表示没有线程等待该资源,这时该函数就对信号量的值进行增1操作,表示同类资源多增加了一个。如果至少有一个线程阻塞在该sem上,表示有线程等待资源,信号量为0,这时该函数保持信号量为0不变,并使某个阻塞在该sem上的线程从sem_wait函数中返回
*注意:编译posix信号灯需要加pthread动态库
System V 信号灯使用:
int semget(key_t key, int nsems, int semflg);
- 功能:创建/打开信号灯
- 参数:
- key:ftok产生的key值(和信号灯关联的key值)
- nsems:信号灯集中包含的信号灯数目
- semflg:信号灯集的访问权限,通常为IPC_CREAT |0666
- 返回值:成功:信号灯集ID ; 失败:-1
int semop ( int semid, struct sembuf *opsptr, size_t nops);
- 功能:对信号灯集合中的信号量进行P - V操作
- 参数:
- semid:信号灯集ID
- nops: 要操作的信号灯的个数 ,1个
- opsptr:信号灯集合操作
struct sembuf {
short sem_num; // 要操作的信号灯的编号
short sem_op; // 1 : 释放资源,V操作
// -1 : 分配资源,P操作
short sem_flg; // 0(阻塞),IPC_NOWAIT, SEM_UNDO
};//对某一个信号灯的操作,如果同时对多个操作,则需要定义这种结构体数组
- 返回值:成功 :0 ; 失败:-1
int semctl ( int semid, int semnum, int cmd…/*union semun arg*/);
- 功能:信号灯集合的控制(初始化/删除)
- 参数:
- semid:信号灯集ID
- semnum: 要操作的集合中的信号灯编号
- cmd:
- GETVAL:获取信号灯的值,返回值是获得值
- SETVAL:设置信号灯的值,需要用到第四个参数:共用体
- IPC_RMID:从系统中删除信号灯集合
- 返回值:成功 0 ; 失败 -1