当前位置: 首页 > ops >正文

深入 Go 底层原理(二):Channel 的实现剖析

1. 引言

"Do not communicate by sharing memory; instead, share memory by communicating." (不要通过共享内存来通信,而应通过通信来共享内存。) 这是 Go 语言并发设计的核心哲学。而 channel 正是实现这一哲学的核心工具。

Channel 为 Goroutine 之间的通信提供了安全的、同步的机制。它究竟是如何在底层保证并发安全和实现阻塞/非阻塞操作的?本文将深入其源码,揭示 channel 的内部奥秘。

2. Channel 的核心数据结构

在 Go 的 runtime/chan.go 源码中,channel 的底层实现是一个名为 hchan 的结构体。其核心字段如下(有简化):

// src/runtime/chan.go
type hchan struct {qcount   uint           // channel 中当前的元素个数dataqsiz uint           // channel 的容量(环形队列的大小)buf      unsafe.Pointer // 指向容量大小为 dataqsiz 的环形队列elemsize uint16         // channel 中元素的大小closed   uint32         // 标记 channel 是否关闭sendx uint // 环形队列的发送索引recvx uint // 环形队列的接收索引recvq waitq // 等待接收的 goroutine 队列 (sudog 链表)sendq waitq // 等待发送的 goroutine 队列 (sudog 链表)lock mutex // 保证 channel 操作的原子性
}type waitq struct {first *sudoglast  *sudog
}

核心组件解析

  • buf (环形队列): 对于带缓冲的 channel,buf 是一个环形队列,用于存储元素。发送和接收操作通过移动 sendxrecvx 索引来完成。

  • lock (互斥锁): channel 的所有操作(发送、接收、关闭)都必须先获取这个锁,这保证了其并发安全性。

  • sendqrecvq (等待队列): 这是 channel 实现阻塞和唤醒的关键。

    • 当一个 goroutine 尝试向一个已满的 channel 发送数据时,它会被打包成一个 sudog(goroutine 在运行时的表示)并加入到 sendq 等待队列中,然后该 goroutine 会被挂起(park)

    • 当一个 goroutine 尝试从一个空的 channel 接收数据时,它也会被加入到 recvq 等待队列中并被挂起。

3. Channel 的操作原理
3.1 发送操作 (ch <- data)
  1. 加锁lock.Lock()

  2. 检查 closed 标志:如果 channel 已关闭,直接 panic

  3. 检查 recvq:如果接收等待队列 recvq 不为空,说明有 goroutine 正在等待接收数据。

    • 这是无缓冲 channel空缓冲 channel的接收者。

    • 直接将要发送的数据拷贝给等待的 goroutine。

    • 唤醒(gounpark)该 goroutine。

    • 解锁,发送完成。

  4. 检查 buf:如果 buf (环形队列) 还有空间 (qcount < dataqsiz)。

    • 将数据拷贝到 bufsendx 位置。

    • sendx 索引递增。

    • qcount 递增。

    • 解锁,发送完成。

  5. 阻塞发送:如果 recvq 为空且 buf 已满。

    • 将当前 goroutine 和要发送的数据打包成 sudog

    • 加入 sendq 发送等待队列。

    • 挂起当前 goroutine (gopark),并解锁。goroutine 会在此等待,直到有接收者将其唤醒。

3.2 接收操作 (<-ch)
  1. 加锁lock.Lock()

  2. 检查 sendq:如果发送等待队列 sendq 不为空。

    • 这通常发生在无缓冲 channel满缓冲 channel

    • sendq 中取出一个等待的 goroutine。

    • 如果 buf 为空,直接从该 goroutine 中取出数据。

    • 如果 buf 已满,先将 buf 的队首元素取出作为返回值,然后将等待 goroutine 的数据存入 buf 队尾。

    • 唤醒该发送 goroutine。

    • 解锁,接收完成。

  3. 检查 buf:如果 buf 中有数据 (qcount > 0)。

    • bufrecvx 位置取出数据。

    • recvx 索引递增。

    • qcount 递减。

    • 解锁,接收完成。

  4. 检查 closed 标志:如果 channel 已关闭且 buf 为空,立即返回元素类型的零值。

  5. 阻塞接收:如果上述条件都不满足。

    • 将当前 goroutine 打包成 sudog

    • 加入 recvq 接收等待队列。

    • 挂起当前 goroutine (gopark) 并解锁

4. select 的实现

select 语句的实现更为复杂,它会将涉及到的所有 case 构建成一个 scase 数组,然后通过 selectgo 函数执行以下逻辑:

  1. 随机轮询:打乱 scase 数组的顺序,防止优先级问题。

  2. 非阻塞检查:遍历所有 case,检查是否有任何一个 channel 可以立即进行非阻塞的发送或接收。如果有,则执行该操作并返回。

  3. 阻塞等待:如果所有 case 都无法立即完成,将当前 goroutine 加入到所有相关 channel 的等待队列中,然后挂起。

  4. 唤醒:当任何一个 channel 的操作条件满足时(例如,有数据被发送进来),对应的 channel 会唤醒这个等待的 goroutine。goroutine 被唤醒后,会完成相应的 case 操作。

5. 总结

Go channel 的底层是一个由互斥锁、环形队列和两个等待队列(sudog 链表)组成的精密结构。正是通过 lock 保证了并发安全,通过 sendqrecvq 配合调度器的 goparkgounpark,实现了 goroutine 之间的同步与通信。理解这一机制,有助于我们更深刻地运用 Go 的并发能力。

http://www.xdnf.cn/news/16869.html

相关文章:

  • 深入 Go 底层原理(十四):timer 的实现与高性能定时器
  • cuda编程笔记(12)--学习cuFFT的简单使用
  • 【机器学习】非线性分类算法(上):KNN(基于距离相似度)与朴素(特征独立)贝叶斯(基于概率统计)
  • Lock 接口及实现类详解:从 ReentrantLock 到并发场景实践
  • Node.js 操作 MongoDB
  • 【LeetCode 热题 100】739. 每日温度——(解法一)单调栈+从右到左
  • 最新Windows11系统镜像,23H2 64位ISO镜像
  • 拉格朗日插值法
  • 【软考中级网络工程师】知识点之堆叠
  • MySQL PostgreSQL JDBC URL 配置允许批量操作
  • 系统思考:超越线性分析
  • openwrt下安装istore(基于pve)
  • Linux网络编程【基于UDP网络通信的字典翻译服务】
  • Effective C++ 条款17:以独立语句将newed对象置入智能指针
  • 农田通量计算方法与应用;高精度感热/潜热通量反演与绘图等;农田蒸散发与能量平衡
  • 50天50个小项目 (Vue3 + Tailwindcss V4) ✨ | QuizApp(交互式在线测验应用组件)
  • Mujoco(MuJoCo,全称Multi - Joint dynamics with Contact)一种高性能的物理引擎
  • 基于Postman进行http的请求和响应
  • linux基本系统服务——DNS服务
  • 【嵌入式汇编基础】-ARM架构基础(三)
  • 宝塔配置文件缺失导致无法正常启动
  • Java 集合框架: LinkedHashSet
  • 进程 Vs 线程
  • 【OpenGL】LearnOpenGL学习笔记01 - 环境配置、窗口创建
  • Flask + YARA-Python*实现文件扫描功能
  • 开源列式分布式数据库clickhouse
  • 深入 Go 底层原理(十三):interface 的内部表示与动态派发
  • Redisson高并发实战:Netty IO线程免遭阻塞的守护指南
  • 算法提升之数学(快速幂+逆元求法)
  • 【20min 急速入门】使用Demucs进行音轨分离