channel 是 Golang 在语言层面提供的 goroutine 间的通信方式,比 Unix 管道更易用也更轻便。channel 主要用于进程内各 goroutine 间通信,如果需要跨进程通信,建议使用分布式系统的方法来解决。
chan数据结构
src/runtime/chan.go:hchan
定义了channel的数据结构:
1
2
3
4
5
6
7
8
9
10
11
12
13
type hchan struct {
qcount uint // 当前队列中剩余元素个数
dataqsiz uint // 环形队列长度,即可以存放的元素个数
buf unsafe.Pointer // 环形队列指针
elemsize uint16 // 每个元素的大小
closed uint32 // 标识关闭状态
elemtype *_type // 元素类型
sendx uint // 队列下标,指示元素写入时存放到队列中的位置
recvx uint // 队列下标,指示元素从队列的该位置读出
recvq waitq // 等待读消息的goroutine队列
sendq waitq // 等待写消息的goroutine队列
lock mutex // 互斥锁,chan不允许并发读写
}
从数据结构可以看出 channel 由队列、类型信息、goroutine 等待队列组成,下面分别说明其原理。
环形队列
chan 内部实现了一个环形队列作为其缓冲区,队列的长度是创建 chan 时指定的。 下图展示了一个可缓存 6 个元素的 channel 示意图:
- dataqsiz 指示了队列长度为 6,即可缓存 6 个元素;
- buf 指向队列的内存,队列中还剩余两个元素;
- qcount 表示队列中还有两个元素;
- sendx 指示后续写入的数据存储的位置,取值 [0, 6);
- recvx 指示从该位置读取数据, 取值 [0, 6);
等待队列
从 channel 读数据,如果 channel 缓冲区为空或者没有缓冲区,当前 goroutine 会被阻塞。向 channel 写数据,如果 channel 缓冲区已满或者没有缓冲区,当前 goroutine 会被阻塞。 被阻塞的 goroutine 将会挂在 channel 的等待队列中:
- 因读阻塞的 goroutine 会被向 channel 写入数据的 goroutine 唤醒;
- 因写阻塞的 goroutine 会被从 channel 读数据的 goroutine 唤醒;
下图展示了一个没有缓冲区的 channel,有几个 goroutine 阻塞等待读数据: 注意,一般情况下 recvq 和 sendq 至少有一个为空。只有一个例外,那就是同一个 goroutine 使用 select 语句向 channel 一边写数据,一边读数据。
类型信息
一个 channel 只能传递一种类型的值,类型信息存储在 hchan 数据结构中。
- elemtype 代表类型,用于数据传递过程中的赋值;
- elemsize 代表类型大小,用于在 buf 中定位元素位置。
锁
一个 channel 同时仅允许被一个 goroutine 读写,为简单起见,本章后续部分说明读写过程时不再涉及加锁和解锁。
channel 读写
创建 channel
创建 channel 的过程实际上是初始化 hchan 结构。其中类型信息和缓冲区长度由 make 语句传入,buf 的大小则与元素大小和缓冲区长度共同决定。
创建 channel 的伪代码如下所示:
1
2
3
4
5
6
7
8
9
func makechan(t *chantype, size int) *hchan {
var c *hchan
c = new(hchan)
c.buf = malloc(元素类型大小*size)
c.elemsize = 元素类型大小
c.elemtype = 元素类型
c.dataqsiz = size
return c
}
向 channel 写数据
向一个 channel 中写数据简单过程如下:
- 如果等待接收队列 recvq 不为空,说明缓冲区中没有数据或者没有缓冲区,此时直接从 recvq 取出 G, 并把数据写入,最后把该 G 唤醒,结束发送过程;
- 如果缓冲区中有空余位置,将数据写入缓冲区,结束发送过程;
- 如果缓冲区中没有空余位置,将待发送数据写入 G,将当前 G 加入 sendq,进入睡眠,等待被读 goroutine 唤醒;
简单流程图如下:
从 channel 读数据
从一个 channel 读数据简单过程如下:
- 如果等待发送队列 sendq 不为空,且没有缓冲区,直接从 sendq 中取出 G,把 G 中数据读出,最后把 G 唤醒,结束读取过程;
- 如果等待发送队列 sendq 不为空,此时说明缓冲区已满,从缓冲区中首部读出数据,把 G 中数据写入缓冲区尾部,把 G 唤醒,结束读取过程;
- 如果缓冲区中有数据,则从缓冲区取出数据,结束读取过程;
- 将当前 goroutine 加入 recvq,进入睡眠,等待被写 goroutine 唤醒;
简单流程图如下:
关闭 channel
关闭 channel 时会把 recvq 中的 G 全部唤醒,本该写入 G 的数据位置为 nil。 把 sendq 中的 G 全部唤醒,但这些 G 会 panic。
除此之外,panic 出现的常见场景还有:
- 关闭值为 nil 的 channel
- 关闭已经被关闭的 channel
- 向已经关闭的 channel 写数据
常见用法
单向 channel
顾名思义,单向 channel 指只能用于发送或接收数据,实际上也没有单向 channel。
我们知道 channel 可以通过参数传递,所谓单向 channel 只是对 channel 的一种使用限制,这跟 C 语言使用 const 修饰函数参数为只读是一个道理。
- func readChan(chanName <-chan int): 通过形参限定函数内部只能从 channel 中读取数据
- func writeChan(chanName chan<- int): 通过形参限定函数内部只能向 channel 中写入数据
一个简单的示例程序如下:
1
2
3
4
5
6
7
8
9
10
11
func readChan(chanName <-chan int) {
<- chanName
}
func writeChan(chanName chan<- int) {
chanName <- 1
}
func main() {
var mychan = make(chan int, 10)
writeChan(mychan)
readChan(mychan)
}
mychan 是个正常的 channel,而 readChan() 参数限制了传入的 channel 只能用来读,writeChan() 参数限制了传入的 channel只能用来写。
select
使用 select 可以监控多 channel,比如监控多个 channel,当其中某一个 channel 有数据时,就从其读出数据。
一个简单的示例程序如下:
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
package main
import (
"fmt"
"time"
)
func addNumberToChan(chanName chan int) {
for {
chanName <- 1
time.Sleep(1 * time.Second)
}
}
func main() {
var chan1 = make(chan int, 10)
var chan2 = make(chan int, 10)
go addNumberToChan(chan1)
go addNumberToChan(chan2)
for {
select {
case e := <- chan1 :
fmt.Printf("Get element from chan1: %d\n", e)
case e := <- chan2 :
fmt.Printf("Get element from chan2: %d\n", e)
default:
fmt.Printf("No element in chan1 and chan2.\n")
time.Sleep(1 * time.Second)
}
}
}
程序中创建两个 channel: chan1 和 chan2。函数 addNumberToChan() 函数会向两个 channel 中周期性写入数据。通过 select 可以监控两个 channel,任意一个可读时就从其中读出数据。
程序输出如下:
1
2
3
4
5
6
7
8
9
10
1. D:\SourceCode\GoExpert\src>go run main.go
2. Get element from chan1: 1
3. Get element from chan2: 1
4. No element in chan1 and chan2.
5. Get element from chan2: 1
6. Get element from chan1: 1
7. No element in chan1 and chan2.
8. Get element from chan2: 1
9. Get element from chan1: 1
10. No element in chan1 and chan2.
从输出可见,从channel中读出数据的顺序是随机的,事实上select语句的多个case执行顺序是随机的。
通过这个示例想说的是:select 的case语句读channel不会阻塞,尽管channel中没有数据。这是由于case语句编 译后调用读channel时会明确传入不阻塞的参数,此时读不到数据时不会将当前goroutine加入到等待队列,而是直 接返回。
range
通过 range 可以持续从 channel 中读出数据,好像在遍历一个数组一样,当 channel 中没有数据时会阻塞当前 goroutine,与读channel 时阻塞处理机制一样。
1
2
3
4
5
func chanRange(chanName chan int) {
for e := range chanName {
fmt.Printf("Get element from chan: %d\n", e)
}
}
注意:如果向此 channel 写数据的 goroutine 退出时,系统检测到这种情况后会panic,否则range将会永久阻塞。