Golang-GMP

GMP调度



注:以下内容是看小徐的公众号及B站学习源码做的笔记,个人理解,仅供参考

设计目的,为何设计GMP?

无论是多进程、多线程目的都是为了并发提高cpu的利用率,但多进程、多线程都存在局限性。比如多进程通过时间轮片等调度方式实现宏观上并发,但进程间资源独立,切换开销大,多线程虽然共享内存不需要内存页表的切换,但还是涉及到用户态、内核态的切换,权级的切换开销是最大的。 所以多进程,多线程存在切换开销大、高内存占用的问题; 想进一步提高cpu的高利用率,需要避免内核介入,权级的切换,所以协程就是这样实现的,它相当于用户态的线程,操作都在用户态下进行,对内核透明更加轻量。 协程与线程 为 M:1 的关系,M:1存在问题M个协程在同一个线程上进行,无法实现并行。 所以问题归根起来就是:实现一个好的调度器,能很好的处理M个协程映射到N个线程上。golang通过GMP模型实现这种调度。

GMP的底层实现

几个核心数据结构

G是golang对协程的抽象,如下图:核心字段gobuf是g的运行信息(gobuf的运行信息能保障这个goroutine由于系统调用之外的其他调度而暂停时,下次调度到的时候能恢复执行,里面存了包括堆栈指针SP等信息), *m是运行当前g的m(动态绑定的)。 g的状态:waiting、runable、running、dead等
G要绑定到P上才能执行,在G的视角里P是CPU;
image.png
M是golang对线程的抽象,M不直接执行G,而是由P作为代理,M无需跟G绑定,也无需记录G的状态信息,因此G在生命周期中可以跨线程M执行;在m结构体中有一个g0调度协程,执行g之间的切换调度,不执行用户函数,与M为1:1;TLS中保存当前执行g的信息,这个信息保存能保证M在唤醒的时候能执行休眠之前的goroutine(当然,如果M跟着G一起休眠,大概率是因为G由于系统调用而阻塞,G的其他的3种调度类型比如主动调度、被动调度、正常调度都在用户态下,并不会导致M休眠)
image.png

P是golang的调度器,对G来说P是CPU,对M来说P是代理,为M提供可执行的G;数据结构主要是一个256长度的P本地队列,队头指针,队尾指针,以及一个runnext指针,这个指针指向下一个可执行的goroutine(这个指针在维护局部性的时候有用到)
image.png

schedt全局队列
全局任务队列加锁,记录长度
image.png

GMP调度流程

GMP调度流程主要体现在g0gg0的循环中

  1. g0执行schedule()函数寻找可执行的g;

  2. g0执行execute()函数,更新g的状态信息,调用gogo()方法,将执行权交给g

  3. g因为4种调度方式调用m_call函数,把执行权重新交给g0;

  4. g0重新schedule()寻找可执行的g;

  5. g0调用schedule()寻找可执行g的细节:调用了findRunable()方法,在这个方法中,每寻找61次g都会在全局队列中取一个g(防止全局队列中的G饿死),否则就正常从p的本地队列中取,如果本地队列空了,就加锁到全局队列中取,全局队列也没有就通过workstrealing机制去其他P中尝试获取一半,这个过程是4次尝试,并且通过随机因子寻找P,一定程度上保证了公平性,窃取完后会调整目标P的队首指针;

  6. 更新g的状态信息,比如修改g的m为当前m,而后g获得执行权,开始执行任务

  7. g执行任务时,有4中调度方式会导致执行权回到g0的手里,主动调度(用户调用shced方法)、被动调度(不满足执行条件,比如管道阻塞、没有获得锁等,调用g_park()后g进入waiting态,可通过g_read()唤醒)、正常完成(G的任务完成)、抢占调度(G发起系统调用,导致进入阻塞,这时的阻塞是进入到了内核态,因为G发起的系统调用是以M的身份发起的,此时M也是僵直的,所以g0是无法感知到的,所以抢占调度其实是需要一个监控协程来完成的,这个协程越过p直接跟M绑定。 此时阻塞的G跟M绑定,监控协程会把P抽离出来,找一个M重新跟P绑定)

所以整个流程可以描述为
image.png

  • 7
    点赞
  • 15
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
### 回答1: GMP (GNU Multiple Precision Arithmetic Library) 是一个开源的多精度数学库,支持高精度的整数和浮点数运算。Golang 有一个内置的多精度数学包(math/big),它使用了 GMP 库来实现高精度运算。 Golang 的 math/big 包提供了一些基本的数学运算,包括加法、减法、乘法、除法和模运算。它还提供了一些高级的函数,如幂运算、对数、三角函数和取整函数。 Golang 的 math/big 包非常适用于处理高精度的数学运算,如货币计算、加密、科学计算等。它的精度可以达到任意精度,而且运算速度也相当快。 总的来说,GolangGMP 模型是一个非常优秀的多精度数学库,适用于各种高精度数学运算的场景。 ### 回答2: Golang中的gmp模型指的是Goroutine、Mutex、和Channel三个概念的组合使用。 首先,Goroutine是轻量级的线程,可以通过go关键字启动。Goroutine利用multiplexer调度器实现并发执行。它不仅启动速度快,而且占用的内存资源较少,可以高效地处理大量任务。 接下来,Mutex是一种互斥量,用于保护共享资源的访问。在多个Goroutine并发执行的情况下,Mutex可以保证在同一时间只有一个Goroutine能够访问共享资源,避免数据竞争的问题。 最后,Channel是一种用于在Goroutine之间通信的管道。它可以实现Goroutine之间的同步和数据传递。Channel提供了发送和接收操作,可以在不同的Goroutine之间发送和接收数据,确保数据的安全和一致性。通过Channel,Goroutine可以并发地进行通信和协作,实现更高效的并发编程。 Golanggmp模型的优点是简洁而高效。Goroutine提供了轻量级的并发模型,使得并发编程变得简单而高效。Mutex在保护共享资源的同时,避免了死锁的问题。Channel则提供了通信和同步的机制,保证了数据的安全和一致性。 此外,通过使用gmp模型,我们可以充分利用多核处理器的计算能力,提高程序的并发性能。Goroutine的调度器能够智能地利用多核处理器的资源,实现任务的并发执行,提高程序的运行效率。 总结来说,Golanggmp模型提供了一种简洁而高效的并发编程模型,使得我们能够轻松地实现并发编程,并充分利用多核处理器的计算能力。通过合理地使用Goroutine、Mutex和Channel,我们能够编写出高效且可靠的并发程序。 ### 回答3: gmpgolang中的一种高性能并发模型,它是一种轻量级的基于goroutine的消息传递模型。与传统的共享内存模型相比,gmp模型更加安全和简单。 gmp模型的核心思想是通过goroutine之间的通信来实现任务的执行和数据的传递。在gmp模型中,每个任务都可以作为一个goroutine来执行,并与其他goroutine进行消息的传递。这种消息传递是通过通道(channel)来实现的,通道是goroutine之间的连接,用于传递数据和控制消息的通信方式。通过通道,可以实现任务之间的同步和协作,有效地避免了传统共享内存模型中的数据竞争和死锁等问题。 在gmp模型中,每个goroutine都可以独立运行,无需关心其他goroutine的存在和状态。这样可以极大地简化程序的编写和维护,提高了代码的可读性和可维护性。此外,gmp模型还提供了丰富的并发原语,如锁、等待组、原子操作等,以支持更复杂的并发控制和同步操作。 相比于其他并发模型,gmp模型的优势在于其简单性和易用性。并且由于golang本身对并发模型的良好支持,因此在实际使用中,gmp模型可以帮助开发者更轻松地编写高效且具有良好并发性能的程序。 然而,gmp模型也存在一些局限性。由于通道是goroutine之间的连接,因此通道的创建和关闭操作等极易受到限制。另外,在某些情况下,使用共享内存模型可能更加高效,因为通道的消息传递机制可能会引入一定的开销。因此,在选择并发模型时,开发者需要根据具体的应用场景和性能需求进行权衡。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值