Linux 0.11下信号量的实现和应用 Linux 0.11下信号量的实现和应用
1.生产者-消费者问题
从一个实际的问题:生产者与消费者出发,谈一谈为什么要有信号量?信号量用来做什么?
问题描述:现在存在一个文件”.uffer.txt”作为一个共享缓冲区,缓冲区同时最多只能保存10个数。现有一个生产者进程,依次向缓冲区写入整数0,1,2,……,M,M>=500;有N个消费者进程,消费者进程从缓冲区读数,每次读一个,并将读出的数从缓冲区删除。
- 为什么要有信号量?
对于生产者来说,当缓冲区满,也就是空闲缓冲区个数为0时,此时生产者不能继续向缓冲区写数,必须等待,直到有消费者从满缓冲区取走数后,再次有了空闲缓冲区,生产者才能向缓冲区写数。
对于消费者来说,当缓冲区空时,此时没有数可以被取走,消费者必须等待,直到有生产者向缓冲区写数后,消费者才能取数。并且如果当缓冲区空时,先后有多个消费者均想从缓冲区取数,那么它们均需要等待,此时需要记录下等待的消费者的个数,以便缓冲区有数可取后,能将所有等待的消费者唤醒,确保请求取数的消费者最终都能取到数。
也就是说,当多个进程需要协同合作时,需要根据某个信息,判断当前进程是否需要停下来等待;同时,其他进程需要根据这个信息判断是否有进程在等待,或者有几个进程在等待,以决定是否需要唤醒等待的进程。而这个信息,就是信号量。 - 信号量用来做什么?
设有一整形变量sem,作为一个信号量。此时缓冲区为空,sem=0。- 消费者C1请求从缓冲区取数,不能取到,睡眠等待。sem=-1<0,表示有一个进程因缺资源而等待。
- 消费者C2也请求从缓冲区取数,睡眠等待。sem=-2<0,表示有两个进程因缺资源而等待。
- 生产者P往缓冲区写入一个数,sem=sem+1=-1<=0,并唤醒等待队列的头进程C1,C1处于就绪态,C2仍处于睡眠等待。
- 生产者P继续往缓冲区写入一个数,sem=0<=0,并唤醒C2,C1、C2就处于就绪状态。
由此可见,通过判断sem的值以及改变sem的值,就保证了多进程合作的合理有序的推进,这就是信号量的作用。
2. 实现信号量
-
信号量有什么组成?
- 需要有一个整形变量value,用作进程同步。
- 需要有一个PCB指针,指向睡眠的进程队列。
- 需要有一个名字来表示这个结构的信号量。
同时,由于该value的值是所有进程都可以看到和访问的共享变量,所以必须在内核中定义;同样,这个名字的信号量也是可供所有进程访问的,必须在内核中定义;同时,又要操作内核中的数据结构:进程控制块PCB,所以信号量一定要在内核中定义,而且必须是全局变量。由于信号量要定义在内核中,所以和信号量相关的操作函数也必须做成系统调用,还是那句话:系统调用是应用程序访问内核的唯一方法。
-
和信号量相关的函数
Linux在0.11版还没有实现信号量,我们可以先弄一套缩水版的类POSIX信号量,它的函数原型和标准并不完全相同,而且只包含如下系统调用:
sem_t *sem_open(const char *name, unsigned int value); int sem_wait(sem_t *sem); int sem_post(sem_t *sem); int sem_unlink(const char *name);
sem_t是信号量类型,根据实现的需要自己定义。
-
信号量的保护
使用信号量还需要注意一个问题,这个问题是由多进程的调度引起的。当一个进程正在修改信号量的值时,由于时间片耗完,引发调度,该修改信号量的进程被切换出去,而得到CPU使用权的新进程也开始修改此信号量,那么该信号量的值就很有可能发生错误,如果信号量的值出错了,那么进程的同步也会出错。所以在执行修改信号量的代码时,必须加以保护,保证在修改过程中其他进程不能修改同一个信号量的值。也就是说,当一个进程在修改信号量时,由于某种原因引发调度,该进程被切换出去,新的进程如果也想修改该信号量,是不能操作的,必须等待,直到原来修改该信号量的进程完成修改,其他进程才能修改此信号量。修改信号量的代码一次只允许一个进程执行,这样的代码称为临界区,所以信号量的保护,又称临界区保护。
实现临界区的保护有几种不同的方法,在Linux 0.11上比较简单的方法是通过开、关中断来阻止时钟中断,从而避免因时间片耗完引发的调度,来实现信号量的保护。但是开关中断的方法,只适合单CPU的情况,对于多CPU的情况,不适用。Linux 0.11就是单CPU,可以使用这种方法。
3. 信号量的代码实现
-
sem_open()
原型:sem_t *sem_open(const char *name, unsigned int value)
功能:创建一个信号量,或打开一个已经存在的信号量
参数:- name,信号量的名字。不同的进程可以通过同样的name而共享同一个信号量。如果该信号量不存在,就创建新的名为name的信号量;如果存在,就打开已经存在的名为name的信号量。
- value,信号量的初值,仅当新建信号量时,此参数才有效,其余情况下它被忽略。
- 返回值。当成功时,返回值是该信号量的唯一标识(比如,在内核的地址、ID等)。如失败,返回值是NULL。
由于要做成系统调用,所以会穿插讲解系统调用的相关知识。
首先,在linux-0.11/kernel目录下,新建实现信号量函数的源代码文件sem.c。同时,在linux-0.11/include/linux目录下新建sem.h,定义信号量的数据结构。
linux-0.11/include/linux/sem.h1 #ifndef _SEM_H 2 #define _SEM_H 3 4 #include <linux/sched.h> 5 6 #define SEMTABLE_LEN 20 7 #define SEM_NAME_LEN 20 8 9 10 typedef struct semaphore{ 11 char name[SEM_NAME_LEN]; 12 int value; 13 struct task_struct *queue; 14 } sem_t; 15 extern sem_t semtable[SEMTABLE_LEN]; 16 17 #endif
由于sem_open()的第一个参数name,传入的是应用程序所在地址空间的逻辑地址,在内核中如果直接访问这个地址,访问到的是内核空间中的数据,不会是用户空间的。所以要用get_fs_byte()函数获取用户空间的数据。get_fs_byte()函数的功能是获得一个字节的用户空间中的数据。同样,sem_unlink()函数的参数name也要进行相同的处理。
- sem_unlink()
原型:int sem_unlink(const char *name)
功能:删除名为name的信号量。
返回值:返回0表示成功,返回-1表示失败 -
sem_wait()
原型:int sem_wait(sem_t *sem)
功能:信号量的P原子操作(检查信号量是不是为负值,如果是,则停下来睡眠等待,如果不是,则向下执行)。
返回值:返回0表示成功,返回-1表示失败。 -
sem_post()
原型:int sem_post(sem_t *sem)
功能:信号量的V原子操作(检查信号量的值是不是为0,如果是,表示有进程在睡眠等待,则唤醒队首进程,如果不是,向下执行)。返回值:返回0表示成功,返回-1表示失败。
关于sem_wait()和sem_post()
我们可以利用linux 0.11提供的函数sleep_on()实现进程的睡眠,用wake_up()实现进程的唤醒。
但是,sleep_on()比较难以理解。我们先看下sleep_on()的源码。
1 void sleep_on(struct task_struct **p) 2 { 3 struct task_struct *tmp; 4 5 if (!p) 6 return; 7 if (current == &(init_task.task)) 8 panic("task[0] trying to sleep"); 9 tmp = *p; 10 *p = current; 11 current->state = TASK_UNINTERRUPTIBLE; 12 schedule(); 13 if (tmp) 14 tmp->state=0; 15 }
还拿生产者和消费者的例子来说,依然是有一个生产者和N个消费者,目前缓冲区为空,没有数可取。
-
消费者C1请求取数,调用sleep_on(&sem->queue)。此时,tmp指向NULL,p指向C1,调用schedule(),让出CPU的使用权。此时,信号量sem处等待队列的情况如下:
由于tmp是进程C1调用
sleep_on()
函数时申请的局部变量,所以会保存在C1运行到sleep_on()
函数中时C1的内核栈中,只要进程C1还没有从sleep_on()
函数中退出,tmp就会一直保存在C1的内核栈中。而进程C1是在sleep_on()
中调用schedule()
切出去的,所以在C1睡眠期间,tmp自然会保存在C1的内核栈中。这一点对于理解sleep_on()
上如何形成隐式的等待队列很重要。 -
消费者C2请求取数,调用sleep_on(&sem->queue)。此时,信号量sem处的等待队列如下:
从这里就可以看到隐式的等待队列已经形成了。由于进程C2也会由于调用
schedule()
函数在sleep_on()
函数中睡眠,所以进程C2内核栈上的tmp便指向之前的等待队列的队首,也就是C1,通过C2的内核栈便可以找到睡眠的进程C1。这样就可以找到在信号量sem处睡眠的所有进程。 -
我们在看下唤醒函数
wake_up()
:1 void wake_up(struct task_struct **p) 2 { 3 if (p && *p) { 4 (**p).state=0; 5 *p=NULL; 6 } 7 }
从中我们可以看到唤醒函数
wake_up()
负责唤醒的是等待队列队首的进程。
当队首进程C2被唤醒时,从schedule()
函数退出,执行语句:1 if (tmp) 2 tmp->state=0;
会将内核栈上由tmp指向的进程C1唤醒,如果进程C1的tmp还指向其他睡眠的进程,当C1被调度执行时,会将其tmp指向的进程唤醒,这样只要执行一次
wake_up()
操作,就可以依次将所有等待在信号量sem处的睡眠进程唤醒。
sem_wait()和sem_post()函数的代码实现
由于我们要调用sleep_on()
实现进程的睡眠,调用wake_up()
实现进程的唤醒,我们在上面已经讲清楚了sleep_on()
和wake_up()
的工作机制,接下来,便可以具体实现sem_wait()
和sem_post()
函数了。
-
sem_wait()的实现
考虑到sleep_on()
会形成一个隐式的等待队列,而wake_up()
只要唤醒了等待队列的头结点,就可以依靠sleep_on()
内部的判断语句,实现依次唤醒全部的等待进程。所以,sem_wait()
的代码实现,必须考虑到这个情况。
参考linux 0.11内部的代码,对于进程是否需要等待的判断,不能用简单的if语句,而应该用while()语句,假设现在sem=-1,生产者往缓冲区写入了一个数,sem=0<=0,此时应该将等待队列队首的进程唤醒。当被唤醒的队首进程再次调度执行,从sleep_on()
函数退出,不会再执行if判断,而直接从if语句退出,继续向下执行。而等待队列后面被唤醒的进程随后也会被调度执行,同样也不会执行if判断,退出if语句,继续向下执行,这显然是不应该的。因为生产者只往缓冲区写入了一个数,被等待队列的队首进程取走了,由于等待队列的队首进程已经取走了那个数,它应该已经将sem修改为sem=-1,其他等待的进程应该再次执行if判断,由于sem=-1<0,会继续睡眠。要让其他等待进程再次执行时,要重新进行判断,所以不能是if语句了,必须是while()语句才可以。
下面是我第一次实现sem_wait()
的代码:1 int sys_sem_wait(sem_t *sem) 2 { 3 cli(); 4 sem->value--; 5 while( sem->value < 0 ) 6 sleep_on(&(sem->queue)) 7 sti(); 8 return 0; 9 }
但是没有考虑到有一种特殊的信号量:互斥信号量。比如要读写一个文件,一次只能允许一个进程读写,当一个进程要读写该文件时,需要先执行
sem_wait(file)
,此后在该进程读写文件期间,若有其他进程也要读写该文件,则执行流程分析如下:- 进程P1申请读写该文件,value=-1,
sleep_on(&file->queue)
。 - 进程P2申请读写该文件,value=-2,
sleep_on(&file->queue)
。 - 原来读写该文件的进程读写完毕,置value=-1,并唤醒等待队列的队首进程P2。
- 进程P2再次执行,唤醒进程P1,此时执行while()判断,不能跳出while()判断,继续睡眠等待。此时文件并没有被占用,P2完全可以读写该文件,所以程序运行出错了。出错原因在于,修改信号量的语句,必须放在while()判断的后面,因为执行while()判断,进程有可能睡眠,而这种情况下,是不需要记录有多少个进程在睡眠的,因为
sleep_on()
函数形成的隐式的等待队列已经记录下了进程的等待情况。
正确的
sem_wait()
代码如下:1 int sys_sem_wait(sem_t *sem) 2 { 3 cli(); 4 while( sem->value <= 0 ) // 5 sleep_on(&(sem->queue)); //这两条语句顺序不能颠倒,很重要,是关于互斥信号量能不 6 sem->value--; //能正确工作的!!! 7 sti(); 8 return 0; 9 }
- 进程P1申请读写该文件,value=-1,
-
sem_post()的实现
sem_post
的实现必须结合sem_wait()
的实现情况。
还拿生产者和消费者的例子来分析。当前缓冲区为空,没有数可取,value=0。- 消费者C1执行
sem_wait()
,value=0,sleep_on(&queue)
。 - 消费者C2执行
sem_wait()
,value=0,sleep_on(&queue)
。等待队列的情况如下:
- 生产者执行
sem_post()
,value=1,wake_up(&queue)
,唤醒消费者C2。队列的情况如下:
- 生产者再次执行
sem_post()
,value=2,wake_up(&queue)
相当于wake_up(NULL)
。队列情况如上。 - 消费者C2再次执行,唤醒C1,跳出while(),value=1,继续向下执行。
- 消费者C1再次执行,跳出while(),value=0,继续向下执行。
由此可以看出,
sem_post()
里面唤醒进程的判断条件是:value<=1。sem_post
的实现代码如下:1 int sys_sem_post(sem_t *sem) 2 { 3 cli(); 4 sem->value++; 5 if( (sem->value) <= 1) 6 wake_up(&(sem->queue)); 7 sti(); 8 return 0; 9 }
- 消费者C1执行
信号量的完整代码
linux-0.11/kernel/sem.c
1 #include <linux/sem.h> 2 #include <linux/sched.h> 3 #include <unistd.h> 4 #include <asm/segment.h> 5 #include <linux/tty.h> 6 #include <linux/kernel.h> 7 #include <linux/fdreg.h> 8 #include <asm/system.h> 9 #include <asm/io.h> 10 //#include <string.h> 11 12 sem_t semtable[SEMTABLE_LEN]; 13 int cnt = 0; 14 15 sem_t *sys_sem_open(const char *name,unsigned int value) 16 { 17 char kernelname[100]; /* 应该足够大了 */ 18 int isExist = 0; 19 int i=0; 20 int name_cnt=0; 21 while( get_fs_byte(name+name_cnt) != '