图转自https://colobu.com/2018/12/18/dive-into-sync-mutex/

这张图容易让人产生误解,容易让人误以为goroutine1获取的锁,只有goroutine1能释放,其实不是这样的。“秦失其鹿,天下共逐之”。在这张图中,goroutine1与goroutine2竞争的是一种互斥锁。goroutine1成功获取锁以后,锁变成锁定状态,此时goroutine2也可以解锁。

Go语言中有两种锁:

  • 互斥锁 Mutex

  • 读写锁 RWMutex,也叫单写多读锁

第二个锁虽然与第一个仅有两个字母差异,但其实并非同类,稍后我们会看到。名字带有一定的迷惑性,不要被它骗了。

本来Go语言有信道已经足够了,但互斥锁是一种更为常见的多线程协作方式,在其它语言中既然都有实现,Go语言自然也需要支持。

看到锁,我首先想到了一个问题。

Go语言中的锁是怎么实现的?是基于信道实现的吗?

翻一下在官方源码src/sync/mutex.go,Mutex的结构体是这样定义的:

type Mutex struct {    state int32    sema  uint32}

从这种结构体来看,互斥锁并不是基于信道实现的。

实际上,不要看这个结构体很简单,其实锁内部的实现很复杂。

在互斥锁内部有一种自旋操作,所谓自旋对应于CPU的PAUSE指令,就是让CPU空转30个时钟周期,这期间什么也不干,就是为了等着,等着看锁的状态是否能够切换成功。

麻蛋,CPU很闲吗!CPU上班的时候竟然摸鱼,电费也很贵的好吧。

锁是通过一种特殊的对象,让不同线程可以在指定的时间点实现步伐同步;与信道不同的是,信道是不阻塞Go程的,但锁却会。

具体讲,在Go语言中的两种锁中,普通锁Mutex是互斥锁,顾名思义这种锁就像十字路口的红绿灯,一方通行,一方停止,它会直接阻塞Go程;另一种读写锁RWMutex,这种锁是改进的立交桥版本,只阻塞Go程间的写写、读写,但不阻塞读读,稍后会看到这方面具体的实例,体会它们之间的差异。

所以你看,不仅锁不是基于信道实现的,并且性能还比信道差。虽然它在Go语言编程中不被推荐使用,我们还是需要了解一下,这有助于我们有时候阅读别人不太好理解的代码。

普通锁如何使用?

普通锁就是Mutex,它虽然内部复杂,但对外暴露的方法就是两个:

  • Lock,上锁

  • Unlock,解锁

什么是上锁,要锁住谁?什么是解锁,又解除对谁的控制?

我们看一段代码吧:

package main 

import ("sync")

var l sync.Mutexvar a string

func f() {    a = "hi, ly"    l.Unlock() // Unlock 方法解锁 m,如果 m 未加锁会导致运行时错误。}

func main() {    l.Lock() // 默认l是零值解锁状态,在这里先加锁    go f()    l.Lock() // l 已经加锁,则阻塞直到 l 解锁。    println(a) // hi,ly}

源码见:go-easy/并发/锁/mutex1.go

输出是这样的:

hi,ly

在该示例中,第14行的Lock什么意思,它代表main中开始锁住代码吗?那为什么下面main中没有Unlock的代码?为什么第10行的Unlock的操作却在另一个Go程f()中?

对Go语言中锁的理解,不能像SQL的事务那样,不是”开启事务—>干事—>提交或撤消“这样一个过程:

开启事务 {    … code    提交 } catch(错误) {    撤消事务}

互斥锁的Lock、Unlock操作,只针对锁对象本身,并非针对Lock、Unlock之外的那些代码。

互斥锁就是用于同步状态的,或者说是用于同步不同Go程间的事件时间点的。就像十字路口的红绿灯的一样,当灯变成红灯后,下一步如果想让它再变成红灯,必须先把它至少变回一次绿灯;而在此之前,要等待,我们正是利用这种等待的特性,实现了Go程间的同步行为。

具体来讲,在上面示例中,第16行l.Lock发生了阻塞,因为此时l已经处于了Locked状态,除非第10行代码l.Unlock将锁的状态先改变,否则第16行的代码不能继续向下走。

而在这个示例中,并不是说我们在main()中调用了l.Lock(这是一个Go程)、在f()中就不能继续读写内存了(这是另一个Go程),事实上我们在f()中仍然可以对变量a进行自由读写。

使用普通互斥锁,同步的是事件时间点,并没有对“Go程对内存的访问”作任何限制。事实上普通互斥锁也没有这种能力。

有一句教科书式的话是这样说的:对于任何 sync.Mutex 或 sync.RWMutex 类型的变量 l ,满足 a < b ,则我们对 l.Unlock() 的第 a 次调用,总是在对 l.Lock() 的第 b 次调用返回前发生。

简单理解这句话,就两条规则:

  • Unlock要发生在Lock之前

  • 如果尚未Lock,直接Unlock,则会抛出异常

有了这句教科书真言,算是如获至宝了,本身它也适用于RWMutex。如果我们想使用RWMutex改写上面的示例,应当如何改写呢?

看一下代码吧:

package main 

import ("sync")

var l sync.RWMutexvar a string = "hi"

func f() {// println(a)    a = "hi, ly"    l.Unlock() }

func main() {    l.Lock() go f()    l.Lock() println(a) // hi,ly}

源码见:go-easy/并发/锁/mutex1-1.go

输出是一样的。

我们仅是在第5行改变了一下变量l的类型,RWMutex也可以当作普通的Mutex使用。

那么加强版本的RWMutex还有哪些其它妙用呢?

如何使用加强版本的读写锁?

普通锁并不能满足所有场景的互斥需求。看一张表格:

读读 √ 读写 x
写读 x 写写 x

有时候我们有多个线程,譬如简单一些有两个线程,我们要限制它们同时写,但不限制它们同时读。这也很容易理解,这种场景多发生在数据库操作或文件操作中。大多数情况下,读表比写表要快,因为读表是可以并发的,而写表因为要力保数据一致,是要锁表的,会产生阻塞。

接下来我们看看一下读写锁的示例吧:

package main

import ("fmt""sync""time")

func main() {var l sync.RWMutexvar data = 1

for i := 0; i < 10; i++ {go func(t int) {            l.RLock()defer l.RUnlock()            fmt.Printf("Read data: %d %v\n", t, data)        }(i)// if i == 3 {//     time.Sleep(time.Second)// }go func(t int) {            l.Lock()defer l.Unlock()            data++            fmt.Printf("Write Data: %d %v \n", t, data)        }(i)    }    time.Sleep(time.Second)}

源码见:go-easy/并发/锁/mutex2.go

输出:

Read data: 0 1Write Data: 1 2 Read data: 1 2Read data: 5 2Read data: 7 2Read data: 8 2Read data: 9 2Read data: 2 2Read data: 3 2Read data: 4 2Read data: 6 2Write Data: 0 3 Write Data: 3 4 Write Data: 4 5 Write Data: 5 6 Write Data: 7 7 Write Data: 6 8 Write Data: 8 9 Write Data: 9 10 Write Data: 2 11

需要指出的是,这个输出并不是固定的。第一行第一次Read data输出的data有可能是1,也有很大概率是2。为什么输出不固定?当环境一致、输入条件一致时,电脑输出不应该固定吗?电脑不是最诚实的吗?

单线程时电脑确实很诚实,多线程时就不一定了。电脑是人设计的,这方面可能也承袭了人类的缺陷。人类一男一女谈恋爱比较甜蜜简单,多女同追一男,或多男同追一女就容易发生口角或战争。

回到上面的问题,其实不是的,因为本质上这些Go程它们是并发的。第25行data自增代码的执行时间点会与谁对齐,并不固定,完全看当时CPU的心情。

但有一些规范仍然是固定的,譬如:对于任何 sync.RWMutex 类型的变量 l 对 l.RLock 的调用,存在一个这样的 n**,使得 l.RLock 在对 l.Unlock 的第 n 次调用之后发生(返回),且与其相匹配的 l.RUnlock 在对 l.Lock的第 n+1 次调用之前发生。**

这句教科书的话理解起来特别费劲,画个图表就是这样的:

Lock … Unlock ….. RLock ... RUnlock … [RLock …… RUnlock …] Lock … Unlock ...

在读写锁上,先明确一下,Lock与Unlock是写的上锁与解锁,RLock与RUnlock是读的上锁与解锁。它只有这4个方法,它没有WLock与WUnlock。

读写锁在读上是不互斥的。所以它允许多个Go程同时RLock与RUnlock,这是合法的;但是一但有一个线程进行了Lock上写锁,所有的读都要停下来,此时Lock就是一个同步的时间点,走过Unlock后,RLock与RUnlock又可以开始活跃了。

读写锁的这种机制有点像中国古代的婚姻制度三妻四妾,家里妻妾成群好比读锁并飞好不热闹,男人好比写锁,男人一来所有妻妾就闭嘴了。

如果我们把mutex2.go中的第19~21行的代码反注释一下,大体输出就会变成这样了:

Read data: 0 1Read data: 2 1Write Data: 1 2 Read data: 3 2Read data: 1 2Write Data: 2 3 Write Data: 0 4 Read data: 5 4Read data: 4 4Write Data: 4 5 Read data: 6 5Read data: 7 5Read data: 8 5Read data: 9 5Write Data: 3 6 Write Data: 9 7 Write Data: 6 8 Write Data: 7 9 Write Data: 5 10 Write Data: 8 11

我们看到在这个输出里面,因为在第20行人为添加了休眠时间,将某些读线程与写线程隔开了。但从打印行为上来看,写线程成为了读线程的分隔点。在写线程改变data变量以后,读线程总是能读到改变之后的值。这和数据库的读取写入是同样的道理,改变效果总能得到及时彰显。

在这里有个问题我们思考一下,在第14行开启的读线程内,不可以向内存写入数据吗?

并不是的。我们看一个稍加改造之后的示例代码:

package main

import (    "fmt"    "sync"    "time")

func main() {    var l sync.RWMutex    var data = 1.0

    for i := 0; i < 10; i++ {        go func(t int) {            l.RLock()            defer l.RUnlock()            data += .1            fmt.Printf("Read data: %d %v\n", t, data)        }(i)        // if i == 3 {        //     time.Sleep(time.Second)        // }        go func(t int) {            l.Lock()            defer l.Unlock()            data++            fmt.Printf("Write Data: %d %v \n", t, data)        }(i)    }    time.Sleep(time.Second)}

源码见:go-easy/并发/锁/mutex2-1.go

第11行将data的默认值修改为1.0,此时它不再是整形了。还有,添加了第17行代码,现在读线程也开始尝试向内存里写入数据了。输出结果是这样的:

Read data: 0 1.1Write Data: 1 2.1 Read data: 2 2.2Read data: 7 2.4000000000000004Read data: 8 2.5000000000000004Read data: 6 2.3000000000000003Read data: 4 2.8000000000000007Read data: 3 2.900000000000001Read data: 1 3.000000000000001Read data: 5 2.7000000000000006Read data: 9 2.6000000000000005Write Data: 9 4.000000000000001 Write Data: 2 5.000000000000001 Write Data: 3 6.000000000000001 Write Data: 4 7.000000000000001 Write Data: 5 8 Write Data: 6 9 Write Data: 7 10 Write Data: 8 11 Write Data: 0 12

我们看到,即使是“读”线程,也能写入数据。如果说示例mutex2.go演示的是“多读一写”场景,这个mutex2-1.go示例实际演示的却是“多写”场景。

所以我们看到,虽然“读”线程打印的data并不是严格按照从小到大的顺序打印的,譬如第5行2.5比第6行2.3还要大,因为本质上它们是并发执行的,结果是随机的。但data却是以0.1的步伐均匀递增的,看第2~11行,data从2.2按照0.1的步伐均匀递增到3.0。那一长串零最后面的数字是由于计算精度造成的,可以忽略。

这是为什么?

因为在第17行我们写内存了。第17行代码所在的Go程虽然开启的是读锁,但实际上代码进行了写入,此时的并发场景不是“读读”,而是“写写”了。我们只需要将第17行的代码注释掉,再看一看它的表现就明白了:

package main

import (    "fmt"    "sync"    "time")

func main() {    var l sync.RWMutex    var data = 1.0

    for i := 0; i < 10; i++ {        go func(t int) {            l.RLock()            defer l.RUnlock()            // data += .1            fmt.Printf("Read data: %d %v\n", t, data)        }(i)        // if i == 3 {        //     time.Sleep(time.Second)        // }        go func(t int) {            l.Lock()            defer l.Unlock()            data++            fmt.Printf("Write Data: %d %v \n", t, data)        }(i)    }    time.Sleep(time.Second)}

源码见:go-easy/并发/锁/mutex2-2.go

输出:

Read data: 0 1Write Data: 2 2 Read data: 1 2Read data: 6 2Read data: 9 2Read data: 7 2Read data: 3 2Read data: 2 2Read data: 5 2Read data: 4 2Read data: 8 2Write Data: 1 3 Write Data: 0 4 Write Data: 3 5 Write Data: 4 6 Write Data: 6 7 Write Data: 5 8 Write Data: 7 9 Write Data: 8 10 Write Data: 9 11

看看现在的输出,读锁完全并发了,它们挤在一块执行,只拿到了data等于2。

所以我们看,在使用读写锁时,如果我们向内存写入了,此时开启RLock、与开启Lock是一样的。不了解这一点机制,很容易就写出错误的代码,当然了别人的代码也不易读懂。

互斥锁的早期源码

虽然最新的Mutex源码很复杂,难于理解,但早期的Mutex源码却很简单,可谓是骨骼清奇:

package main

type Mutex struct {    key  int32    sema int32}

func xadd(val *int32, delta int32) (new int32) {    for {        v := *val        // cas这个函数是原子操作,它有三个参数,第一个是目标数据的地址,第二个是目标数据的旧值,第三个则是等待更新的新值。每次CAS都会用old和addr内的数据进行比较,如果数值相等,则执行操作,用new覆盖addr内的旧值,如果数据不相等,则忽略后面的操作。        if cas(val, v, v+delta) {            return v + delta        }    }    panic("unreached")}

func (m *Mutex) Lock() {    if xadd(&m.key, 1) == 1 {        // changed from 0 to 1; we hold lock        return    }    // semacquire函数首先检查信号量是否为0:如果大于0,让信号量减一,返回;    // 如果等于0,就调用goparkunlock函数,把当前Goroutine放入该sema的等待队列,并把他设为等待状态。    sys.semacquire(&m.sema)}

func (m *Mutex) Unlock() {    if xadd(&m.key, -1) == 0 {        // changed from 1 to 0; no contention        return    }    // semrelease函数首先让信号量加一,然后检查是否有正在等待的Goroutine:如果没有,直接返回;    // 如果有,调用goready函数唤醒一个Goroutine。    sys.semrelease(&m.sema)}

源码见:go-easy/并发/锁/SimpleMutex.go

这份源码已经加了注释,很好理解。后来变得复杂,是为了解决多并发线程中容易出现的尾部延迟现象,加入了饥饿模式。有了这种机制,更加加强了并发微线程执行的不确定性。不一定后来的微线程就启动的晚,也不一定早期的微线程就一直没有机会。我们所以看到,mutex2-2.go示例中第18行代码的执行像完全随机一样。理解这种机制就好。

一道题:看懂这道题就理解基本的互斥锁了

我们看一道有意思的题:

package mainimport ("sync""time")func main() { // g1var mu sync.Mutexgo func() { // g2        mu.Lock()        time.Sleep(10 * time.Second)        mu.Unlock()    }()    time.Sleep(time.Second)    mu.Unlock()select {}}

源码见:go-easy/并发/锁/mutex3.go,这道题来自https://colobu.com/2018/12/18/dive-into-sync-mutex/

问题是这样的:

如果一个goroutine g1 通过Lock获取了锁, 在 g1 持有锁的期间, 另外一个goroutine g2 调用Unlock释放这个锁, 会出现什么现象?

三个选项:

A、 g2 调用 Unlock panic

B、 g2 调用 Unlock 成功,将来 g1调用 Unlock 会 panic

C、 g2 调用 Unlock 成功,将来 g1调用 Unlock 也成功

应该选择哪一个呢?

答案为B,源码中有注释。

在了解了Go语言的互斥锁和读写锁之后,不知道你是什么想法。是不是感觉锁非常复杂,其实除非逼不得已,不必使用锁。锁既麻烦,效率又低,在Go程同步上完败于信道。

除了信道、互斥锁与读写锁,在Go语言中用于实现微线程同步的还有Once与WaitGroup,这两者它们也是锁吗?这个问题留给你思考一下。

所有源码见:https://gitee.com/rxyk/go-easy

我讲明白了没有,欢迎留言。

2021年1月16日

引用致谢
  • Mutex源码、示意图及试题引自 https://colobu.com/2018/12/18/dive-into-sync-mutex/

同步方法中的锁对象_互斥锁与读写锁:如何使用锁完成Go程同步?相关推荐

  1. 华为应用锁退出立即锁_面试官:你说说互斥锁、自旋锁、读写锁、悲观锁、乐观锁的应用场景...

    前言 生活中用到的锁,用途都比较简单粗暴,上锁基本是为了防止外人进来.电动车被偷等等. 但生活中也不是没有 BUG 的,比如加锁的电动车在「广西 - 窃·格瓦拉」面前,锁就是形同虚设,只要他愿意,他就 ...

  2. 关抢占 自旋锁_互斥锁、自旋锁、读写锁、悲观锁、乐观锁的应用场景

    前言 生活中用到的锁,用途都比较简单粗暴,上锁基本是为了防止外人进来.电动车被偷等等. 但生活中也不是没有 BUG 的,比如加锁的电动车在「广西 - 窃·格瓦拉」面前,锁就是形同虚设,只要他愿意,他就 ...

  3. 第十二节:深究内核模式锁的使用场景(自动事件锁、手动事件锁、信号量、互斥锁、读写锁、动态锁)

    一. 整体介绍 温馨提示:内核模式锁,在不到万不得已的情况下,不要使用它,因为代价太大了,有很多种替代方案. 内核模式锁包括: ①:事件锁 ②:信号量 ③:互斥锁 ④:读写锁 ⑤:动态锁 二. 事件锁 ...

  4. 面试官:你说说互斥锁、自旋锁、读写锁、悲观锁、乐观锁的应用场景?

    前言 生活中用到的锁,用途都比较简单粗暴,上锁基本是为了防止外人进来.电动车被偷等等. 但生活中也不是没有 BUG 的,比如加锁的电动车在「广西 - 窃·格瓦拉」面前,锁就是形同虚设,只要他愿意,他就 ...

  5. 互斥锁 、 自旋锁、读写锁和RCU锁

    互斥锁 mutex: 在访问共享资源之前对进行加锁操作,在访问完成之后进行解锁操作. 加锁后,任何其他试图再次加锁的线程会被阻塞,直到当前进程解锁. 如果解锁时有一个以上的线程阻塞,那么所有该锁上的线 ...

  6. 分布式锁:互斥锁、自旋锁、读写锁、悲观锁、乐观锁

    前言 如何用好锁,也是程序员的基本素养之一了. 高并发的场景下,如果选对了合适的锁,则会大大提高系统的性能,否则性能会降低. 所以,知道各种锁的开销,以及应用场景是很有必要的. 接下来,就谈一谈常见的 ...

  7. 互斥锁、自旋锁、读写锁、悲观锁、乐观锁的应用场景

    前言 在编程世界里,「锁」更是五花八门,多种多样,每种锁的加锁开销以及应用场景也可能会不同. 如何用好锁,也是程序员的基本素养之一了. 高并发的场景下,如果选对了合适的锁,则会大大提高系统的性能,否则 ...

  8. 【剧前爆米花--爪哇岛寻宝】常见的锁策略——乐观锁、读写锁、重量级锁、自旋锁、公平锁、可重入锁等

    作者:困了电视剧 专栏:<JavaEE初阶> 文章分布:这是关于操作系统锁策略的文章,包括乐观锁.读写锁.重量级锁.自旋锁.公平锁.可重入锁等,希望对你有所帮助! 目录 乐观锁和悲观锁 悲 ...

  9. JUC并发编程第十四篇,StampedLock(邮戳锁)为什么比ReentrantReadWriteLock(读写锁)更快!

    JUC并发编程第十四篇,StampedLock(邮戳锁)为什么比ReentrantReadWriteLock(读写锁)更快! 一.ReentrantReadWriteLock(读写锁) 1.读写锁存在 ...

最新文章

  1. HTTP协议03-http特点及请求方式
  2. 智能卡技术和身份认证
  3. java基础 关于转换流
  4. 无根树转有根树的一般方法
  5. php5.4 win10 mysql_win10本地搭建apache+php+mysql运行环境
  6. 本地目录+Eclipse+Webstorm当SVN配置库服务器更换-客户端设置方式
  7. 电子书下载:C# 4.0 How To
  8. 搜索 | 电商行业模版驱动业务增长实践
  9. 2015-03-19 Opportunity order by implementation detail
  10. struts2线程安全
  11. shell 获取字符串前两个字符串、获取字符串最后一个字符、去掉字符串最后一个字符、去掉末尾一个字符、去掉末尾两个字符
  12. 循环输出26个字母C语言,菜鸟求助,写一个随机输出26个英文字母的程序
  13. 安卓抓包工具tcpdump
  14. Cadence Allegro修改字体粗细图文教程
  15. win7系统老是弹窗怎么解决_Win7电脑右下角弹出广告如何解决?
  16. 再说打日志你不会,pm2 + log4js,你值得拥有
  17. win7如何看计算机几核,win7系统查看CPU是几核的操作方法
  18. 艾伦·凯与Smalltalk语言
  19. JavaScript - 从身份证号中获取生日
  20. linux版英特尔酷睿i7,英特尔酷睿i7 1165G7和AMD Ryzen 7 Pro 4750U Linux性能对比

热门文章

  1. virtualbox手动挂载共享文件夹
  2. ubuntu18找不到wifi适配器
  3. linux权限管理之用户和组管理
  4. Pandas知识点-统计运算函数
  5. 用Asp.net写自己的服务框架
  6. 介绍当前流行的一些开源Flash视频播放器
  7. 漫步数理统计十八——相关系数
  8. 漫步线性代数十八——正交基和格拉姆-施密特正交化(下)
  9. mount挂载时 no such device_mount系统调用(vfs_kern_mount-gt;mount_fs-gt;fill_super)
  10. python中sklearn中的Imputer模块改动