Golang(三)Goroutine原理

前言

  • 最近用到了一些 Golang 异步编程的地方,感觉 Golang 相对于其他语言(如 Java)对多线程编程的支持非常大,使用起来也非常方便。于是决定了解一下 Goroutine 的底层原理。
  • Goroutine 本质是协程,是实现并行计算的核心。只需要在对应的函数前加上 Go 关键词即可异步执行:
go func() {
}()

基本概念

  • 并发:一段时间内执行多个程序,即在一个 cpu 上切换着执行多项任务,宏观上是同时的,微观上是顺序执行
  • 并行:同时执行多个程序,即在多个 cpu 上同时运行不同任务,不需要上下文切换执行不同任务达到宏观同时进行的效果
  • 进程:进程是计算机中的程序关于某数据集合上的一次运行活动,是系统进行资源分配和调度的基本单位。是具有独立功能的程序关于某个数据集合的一次运行活动。它可以申请和拥有系统资源,是一个动态的概念,是一个活动的实体
  • 线程:线程是进程的一个实体,是 cpu 调度和分派的基本单位,它是比进程更小的能独立运行的基本单位。线程自己基本上不拥有系统资源,只拥有一点在运行中必不可少的资源(如程序计数器、一组寄存器和栈),但是它可与同属一个进程的其他的线程共享进程所拥有的全部资源。线程间通信主要通过共享内存,上下文切换较快,资源开销较少
  • 协程:是一种用户态的轻量级线程,协程的调度完全由用户控制。线程和进程的操作是由程序触发系统接口,最后的执行者是系统;协程的操作执行者则是用户自身程序。协程拥有自己的寄存器上下文和栈。协程调度切换时,将寄存器上下文和栈保存到其他地方,在切回来的时候,恢复先前保存的寄存器上下文和栈,直接操作栈则基本没有内核切换的开销,可以不加锁的访问全局变量,所以上下文的切换非常快。Goroutine 就是一种协程

调度模型

  • Goroutine 并发调度通过 GPM 模型实现,包含四个结构:M、G、P、Sched:

    • M:代表内核级线程,一个 M 对应一个线程
    • G:代表一个 Goroutine,包含自己的栈、程序计数器等信息
    • P:指处理器,主要用途是用来执行 Goroutine,维护一个 Goroutine 队列,同时还有一个全局队列。每一个运行的 M 都必须绑定一个 P,就像线程必须在么一个 cpu 核上执行一样
    • Sched:代表调度器,维护 M 和 G 的队列和状态信息

  • 如上图,2 个 M,每个 M 拥有 1 个 P 和 1 个正在运行的 G。
  • P 的数量可以通过 GOMAXPROCS() 设置,代表有多少个 Goroutine 可以同时运行。

调用异步

  • 执行 go func() 时,会在队列尾部加入一个 Goroutine。
  • 如果此时还有空闲的 P,则创建一个 M。M 会启动一个底层线程,循环执行能找到的 G 任务。
  • G 任务的执行任务是:先从本地队列找,本地没有则从全局队列找。一次转移 num(G)/num(P) 个任务,再去其他 P 中获取队列一半的任务。

监视超时

  • 启动一个 G 时,会专门创建一个 Sysmon,用来监视和管理。记录所有 P 的 G 任务计数 schedtick(schedtick 会在每执行一个 G 任务后递增)。
  • 如果检查到 schedtick 一直没有递增,说明这个 P 一直在执行同一个 G 任务,如果超过一定时间(10ms),就在这个 G 任务的栈信息里加一个标记。
  • 内联函数执行时发现标记则中断自己,把自己加到队列末尾;非内联函数则会忽视标记,一直执行到结束。

中断恢复

  • 对于一个 G 任务中断后:中断时将寄存器信息保存在 G 对象里,再次执行时将栈信息复制到寄存器里,继续执行。

首次启动

  • 系统启动时主线程启动,第一个 M1 就是主线程,M1 会绑定一个 P。
  • main 函数作为第一个 Goroutine 执行。
  • main 里其他的 Goroutine 会绑定到当前 M1 的 P1 上。
  • 执行 main 里的 Goroutine 时,会创建新的 M2,新 M2 的初始 P2 本地任务队列时空的,会从 P1 取一些过来。
  • 然后依此类推直到 M 数量达到限制。

参考文献

原文地址:https://www.cnblogs.com/wangao1236/p/10899028.html

时间: 2024-10-25 06:26:25

Golang(三)Goroutine原理的相关文章

golang的goroutine调度机制

golang的goroutine调度机制 2016年09月26日 14:28:08 阅读数:5664 一直对goroutine的调度机制很好奇,最近在看雨痕的golang源码分析,(基于go1.4) 感觉豁然开朗,受益匪浅: 去繁就简,再加上自己的一些理解,整理了一下 ~~ 调度器 主要基于三个基本对象上,G,M,P(定义在源码的src/runtime/runtime.h文件中) 1.     G代表一个goroutine对象,每次go调用的时候,都会创建一个G对象 2.     M代表一个线程

golang的goroutine与channel

Golang的goroutine是非抢占式的, 令人相当蛋疼! 有痛不能呻吟...只能配合channel在各goroutine之间传递信号来实现抢占式, 而这形成了golang最灵活与最具性能的核心. 相信, 彩虹总在风雨后... 学会process, thread, routine之间的配合与取舍. 关于channel的猜测: Golang中Channel的阻塞规则, 注意顺序: Write端依赖于Read端, 对于无缓冲Channel, 如果没有goroutine去消费Channel, 则w

go语言之行--golang核武器goroutine调度原理、channel详解

一.goroutine简介 goroutine是go语言中最为NB的设计,也是其魅力所在,goroutine的本质是协程,是实现并行计算的核心.goroutine使用方式非常的简单,只需使用go关键字即可启动一个协程,并且它是处于异步方式运行,你不需要等它运行完成以后在执行以后的代码. go func()//通过go关键字启动一个协程来运行函数 二.goroutine内部原理 概念介绍 在进行实现原理之前,了解下一些关键性术语的概念. 并发 一个cpu上能同时执行多项任务,在很短时间内,cpu来

golang GC(一 原理)

golang中的gc采用三色标记法.在讲三色标记法之前,先了解一下Mark and Sweep算法,因为Mark and Sweep算法是三个标记法的一个改进版. Mark and Sweep算法: 停止运行程序,遍历所有被引用的变量,被引用的对象被标记为“被引用”,没有被标记的进行回收.内存单元并不会立刻回收对象,而是将其标记为“不可达”状态.直到到达某个阈值或者到达某个时间间隔后,对其进行垃圾回收.算法分为两部分:标记(Mark)和清理(Sweep).挂起程序,对所有存活的内存单元进行扫描,

[golang学习] goroutine调度

这两天有些闲功夫, 学习下golang, 确实非常简洁. 不过有些缺憾. 在我的测试中. golang的调度(goroutine)似乎不是非常好. func say(k int) { fmt.Println(k) } func main() { runtime.GOMAXPROCS(2) for i := 0; i < 100; i++ { go say(i) } for { } } 这段测试代码是有bug的. 一开始我并没有设置 runtime.GOMAXPROCS(2) 则由于for循环导致

React-Native 与 Android 集成 &lt;三、原理与总结&gt;

原文:腾讯Bugly(http://bugly.qq.com) ReactNative 让开发者使用 JavaScript 和 React 编写应用,利用相同的核心代码就可以创建 基于Web,iOS 和 Android 平台的原生应用.Facebook 在2015.9.15发布了 ReactNative for Android,把JavaScript 开发技术扩展到了Android平台. 当前腾讯产品部分介绍: 目前ReactNative的版本节奏大概是两周一个版本,空间从11的版本便开始尝试接

golang之goroutine和channel

多线程程序在单核上运行,就是并发 多线程程序在多核上运行,不是并行 Go协程和Go主线程 Go主线程(线程):一个Go线程上,可以起多个协程 ,你可以这样理解,协程是轻量级的线程 Go协程的特点: 1)有独立的栈空间 2)共享程序堆空间 3) 调度由用户控制 4)协程是轻量级的线程3 goroutine快速入门 func test() { for i := 1; i <= 10; i++ { fmt.Println("test() hello, world " + strconv

linux下selenium远程服务搭建(三)原理

Selenium-Grid版本 selenium-grid分为版本1和版本2,其实它的2个版本并不是和selenium的版本1和2相对应发布的[即selenium-grid2的发布比selenium2要晚一点].不过幸运的是现在的selenium-grid2基本能支持selenium2的所有功能了. selenium虽然分1和2,但其实原理和基本工作方式都是一样的.只是版本2同时支持selenium1和selenium2两种协议,并且在一些小的功能和易用性上进行了优化.比如:指定测试平台的方式:

Golang 多goroutine异步通知error的一种方法

深入理解ThreadLocal用途我们一般用ThreadLocal来提供线程局部变量.线程局部变量会在每个Thread内拥有一个副本,Thread只能访问自己的那个副本.文字解释总是晦涩的,我们来看个例子. public class Test { private static ThreadLocal<String> threadLocal = new ThreadLocal<>(); public static void main(String[] args) { Thread t