当前位置: 首页 > article >正文

Go 语言从入门到进阶 | 第 8 章:并发编程——Goroutine 与 Channel

系列:Go 语言从入门到进阶作者:耿雨飞适用版本:go v1.26.2前置条件在开始本章学习之前,请确保:已完成前七章的学习,掌握函数、接口和泛型基础理解函数作为一等公民的概念(闭包、函数类型)已获取 Go 1.26.2 源码树(go-go1.26.2目录)导读并发是 Go 语言最核心的设计哲学之一。Go 的并发模型基于 CSP(Communicating Sequential Processes,通信顺序进程)理论——不要通过共享内存来通信,而要通过通信来共享内存。这一理念贯穿了 Go 语言的设计,从轻量级的 goroutine 到类型安全的 channel,形成了一套简洁而强大的并发编程体系。本章将从go关键字的使用出发,深入分析 goroutine 的创建与调度机制,然后系统讲解 channel 的各种用法和底层实现,最后通过select多路复用和常见并发模式,帮助你掌握 Go 并发编程的核心技能。本章将对照 Go 1.26.2 源码中的以下关键路径:源码路径内容说明src/runtime/proc.gogoroutine 调度器实现——GMP 模型核心src/runtime/runtime2.go运行时核心数据结构:g、m、p、schedt、sudogsrc/runtime/chan.gochannel 底层实现——hchan、发送、接收、关闭src/runtime/select.goselect语句的运行时实现src/runtime/stack.gogoroutine 栈管理——初始栈大小与动态增长学习目标学完本章后,你应当能够:使用go关键字启动 goroutine,理解其轻量级特性理解 GMP 调度模型的基本原理,能对照src/runtime/proc.go找到关键函数正确使用无缓冲和有缓冲 channel 进行 goroutine 间通信掌握 channel 的发送、接收、关闭操作及其行为规则理解hchan结构体的核心字段和环形缓冲区设计使用select实现多路复用和超时控制运用生产者-消费者、Fan-in/Fan-out、Pipeline、Worker Pool 等常见并发模式8.1 Goroutine 基础8.1.1 go 关键字启动 goroutine在 Go 中,启动一个并发执行单元极其简单——只需在函数调用前加上go关键字:packagemainimport("fmt""time")funcsayHello(namestring){fmt.Printf("Hello, %s!\n",name)}funcmain(){gosayHello("World")// 启动一个新的 goroutinegosayHello("Go")// 再启动一个gofunc(){// 匿名函数也可以fmt.Println("Anonymous goroutine")}()time.Sleep(100*time.Millisecond)// 等待 goroutine 执行}几个关键点:go后面跟的必须是函数调用(普通函数、方法、匿名函数均可)go语句本身不阻塞——它立即返回,新的 goroutine 在后台并发执行main函数本身也运行在一个 goroutine 中(称为main goroutine)当 main goroutine 退出时,程序立即终止,不会等待其他 goroutine 完成注意:上面使用time.Sleep等待 goroutine 只是演示用途。实际代码中应使用sync.WaitGroup(第 9 章)或 channel 来同步。8.1.2 Goroutine 的轻量级特性Goroutine 不是操作系统线程,而是 Go 运行时管理的用户态轻量级线程。与 OS 线程相比,goroutine 有三个显著优势:1. 极小的初始栈每个 goroutine 的初始栈仅2 KB(src/runtime/stack.go:78):// src/runtime/stack.go:78stackMin=2048而 OS 线程的默认栈通常为 1-8 MB。这意味着同样的内存,Go 可以创建比 OS 线程多数百倍的 goroutine。2. 动态栈增长Goroutine 的栈不是固定大小的,而是按需增长。当栈空间不足时,运行时会自动分配更大的栈并迁移数据。Go 1.4+ 采用连续栈(contiguous stack)策略——分配一个两倍大的新栈,将旧栈内容复制过来,然后释放旧栈。3. 极低的创建和切换开销创建一个 goroutine 只需分配一个小的g结构体加上初始栈内存,而 goroutine 切换只需保存和恢复少量寄存器(gobuf结构体),不涉及内核态切换。让我们验证一下 goroutine 的轻量级特性:packagemainimport("fmt""runtime""sync")funcmain(){varwg sync.WaitGroup n:=100_000// 启动 10 万个 goroutinevarmemBefore runtime.MemStats runtime.ReadMemStats(memBefore)fori:=0;in;i++{wg.Add(1)gofunc(){deferwg.Done()select{}// 永久阻塞,保持 goroutine 存活}()}varmemAfter runtime.MemStats runtime.ReadMemStats(memAfter)fmt.Printf("启动 goroutine 数量: %d\n",n)fmt.Printf("内存增长: %.2f MB\n",float64(memAfter.Sys-memBefore.Sys)/(1024*1024))fmt.Printf("每个 goroutine 约占: %.2f KB\n",float64(memAfter.Sys-memBefore.Sys)/float64(n)/1024)fmt.Printf("当前 goroutine 总数: %d\n",runtime.NumGoroutine())}实际运行会发现,10 万个 goroutine 仅消耗几百 MB 内存——这在 OS 线程模型中几乎不可能实现。8.1.3 go 关键字的运行时实现编译器会将go f(args)语句转换为对runtime.newproc的调用。让我们看看这个函数(src/runtime/proc.go:5295-5308):// src/runtime/proc.go:5295-5308// Create a new g running fn.// Put it on the queue of g's waiting to run.// The compiler turns a go statement into a call to this.funcnewproc(fn*funcval){gp:=getg()pc:=sys.GetCallerPC()systemstack(func(){newg:=newproc1(fn,gp,pc,false,waitReasonZero)pp:=getg().m.p.ptr()runqput(pp,newg,true)ifmainStarted{wakep()}})}这段代码揭示了go语句的完整执行过程:newproc1(src/runtime/proc.go:5313):创建新的g结构体优先从 P 的空闲列表gFree中复用已结束的 goroutine若没有空闲的,调用malg(stackMin)分配一个新的,初始栈 2048 字节设置新 goroutine 的初始状态(PC、SP 等)runqput(src/runtime/proc.go:7478):将新 goroutine 放入当前 P 的本地运行队列优先放入runnext字段(下一个执行的 goroutine)本地队列满时,将一半转移到全局运行队列(runqputslow)wakep:如果有空闲的 P,尝试唤醒或创建一个 M 来执行8.1.4 GMP 调度模型概览Go 的调度器采用GMP 模型,这是理解 goroutine 运行机制的关键。src/runtime/proc.go文件开头的注释(第 24-34 行)清晰地定义了三个核心概念:// src/runtime/proc.go:24-34 // Goroutine scheduler // The scheduler's job is to distribute ready-to-run goroutines over worker threads. // // The main concepts are: // G - goroutine. // M - worker thread, or machine. // P - processor, a resource that is required to execute Go code. // M must have an associated P to execute Go code, however it can be // blocked or in a syscall w/o an associated P.G(Goroutine)g结构体定义在src/runtime/runtime2.go:473,是 goroutine 的运行时表示:// src/runtime/runtime2.go:473(简化)typegstruct{stack stack// 栈内存范围 [stack.lo, stack.hi)stackguard0uintptr// 栈增长检测哨兵_panic*_panic// 最内层的 panic_defer*_defer// 最内层的 deferm*m// 当前关联的 Msched gobuf// 调度上下文(SP, PC, BP 等)atomicstatus atomic.Uint32// goroutine 状态goiduint64// goroutine IDstartpcuintptr// go 语句中函数的 PCparentGoiduint64// 创建此 goroutine 的父 goroutine IDwaiting*sudog// 等待中的 sudog 列表// ...}Goroutine 的状态机定义在src/runtime/runtime2.go:17-80:状态值含义_Gidle0刚分配,尚未初始化_Grunnable1在运行队列中,等待被调度执行_Grunning2正在执行用户代码,拥有栈和 M_Gsyscall3正在执行系统调用_Gwaiting4被阻塞(如等待 channel、锁、sleep)_Gdead6已结束,可被复用M(Machine / OS Thread)m结构体定义在src/runtime/runtime2.go:618,代表一个操作系统线程:// src/runtime/runtime2.go:618(简化)typemstruct{g0*g// 调度栈——每个 M 有一个专用的 g0curg*g// 当前正在运行的用户 goroutinep puintptr// 当前关联的 P(执行 Go 代码必须有 P)spinningbool// 是否处于自旋状态(正在寻找可运行的 G)park note// 用于 M 的休眠/唤醒// ...}关键点:每个 M 有一个特殊的g0,g0使用系统线程栈,运行调度代码。用户 goroutine 的代码在curg上执行。P(Processor)p结构体定义在src/runtime/runtime2.go:772,代表一个逻辑处理器:// src/runtime/runtime2.go:772(简化)typepstruct{idint32statusuint32// pidle/prunning/psyscall/pgcstop/pdeadm muintptr// 关联的 M(空闲时为 nil)mcache*mcache// 内存分配缓存// 本地运行队列(无锁访问)runqheaduint32runqtailuint32runq[256]guintptr// 固定大小 256 的环形队列runnext guintptr// 下一个优先执行的 GgFree gList// 已结束的 G 缓存(可复用)// ...}P 的数量由GOMAXPROCS环境变量或runtime.GOMAXPROCS()函数决定,默认等于 CPU 核心数。GMP 协作关系┌─────────────────────────────────────┐ │ Global Run Queue │ │ ┌───┐ ┌───┐ ┌───┐ ┌───┐ │ │ │ G │ │ G │ │ G │ │ G │ ... │ │ └───┘ └───┘ └───┘ └───┘ │ └──────────────┬──────────────────────┘ │ steal / put ┌──────────────────┼──────────────────┐ │ │ │ ┌─────▼─────┐ ┌─────▼─────┐ ┌─────▼─────┐ │ P0 │ │ P1 │ │ P2 │ │ ┌───────┐ │ │ ┌───────┐ │ │ ┌───────┐ │ │ │Local Q│ │ │ │Local Q│ │ │ │Local Q│ │ │ └───────┘ │ │ └───────┘ │ │ └───────┘ │ └─────┬─────┘ └─────┬─────┘ └─────┬─────┘ │ │ │ ┌─────▼─────┐ ┌─────▼─────┐ ┌─────▼─────┐ │ M0 │ │ M1 │ │ M2 │ │ (Thread) │ │ (Thread) │ │ (Thread) │ └───────────┘ └───────────┘ └───────────┘调度循环的核心逻辑在schedule函数(src/runtime/proc.go:4135)中:// src/runtime/proc.go:4135(简化)funcschedule(){mp:=getg().m// ...gp,inheritTime,tryWakeP:=findRunnable()// 阻塞直到找到可运行的 G// ...execute(gp,inheritTime)// 切换到 gp 执行}findRunnable(src/runtime/proc.go:3389)查找可运行 goroutine 的优先级顺序:本地运行队列(runqget)——无锁访问,最快全局运行队列(globrunqget)——需要加锁,每 61 次调度检查一次以防饥饿网络轮询器(netpoll)——检查就绪的网络 I/O工作窃取(work stealing)——从其他 P 的本地队列偷取一半execute(src/runtime/proc.go:3331)完成从调度器到用户 goroutine 的切换:// src/runtime/proc.go:3331(简化)funcexecute(gp*g,inheritTimebool){mp:=getg().m mp.curg=gp// 设置当前运行的 Ggp.m=mp// G 绑定 Mcasgstatus(gp,_Grunnable,_Grunning)// 状态:就绪 → 运行// ...gogo(gp.sched)// 汇编实现:恢复 G 的寄存器,跳转执行}goroutine 的阻塞与唤醒当 goroutine 需要阻塞时(如等待 channel),调用gopark(src/runtime/proc.go:445):// src/runtime/proc.go:445funcgopark(unlockffunc(*g,unsafe.Pointer)bool,lock unsafe.Pointer,reason waitReason,traceReason traceBlockReason,traceskipint){// ...mp:=acquirem()gp:=mp.curg gp.waitreason=reason// 记录等待原因// ...mcall(park_m)// 切换到 g0 栈,将 G 状态改为 _Gwaiting,调用 schedule()}当条件满足时(如 channel 有数据),调用goready(src/runtime/proc.go:481)唤醒:// goready 将 gp 状态改为 _Grunnable,放入 P 的本地运行队列funcgoready(gp*g,traceskipint)整个流程形成循环:schedule→execute→ 用户代码 →gopark(阻塞)→schedule→ …8.2 Channel 通信Channel 是 Go 并发编程的核心通信原语——

相关文章:

Go 语言从入门到进阶 | 第 8 章:并发编程——Goroutine 与 Channel

系列:Go 语言从入门到进阶 作者:耿雨飞 适用版本:go v1.26.2 前置条件 在开始本章学习之前,请确保: 已完成前七章的学习,掌握函数、接口和泛型基础 理解函数作为一等公民的概念(闭包、函数类型) 已获取 Go 1.26.2 源码树(go-go1.26.2 目录) 导读 并发是 Go 语言最核…...

Qianfan-OCR惊艳效果:带水印/折痕/阴影扫描件经预处理后清晰还原

Qianfan-OCR惊艳效果:带水印/折痕/阴影扫描件经预处理后清晰还原 1. 效果展示:从模糊到清晰的蜕变 1.1 复杂文档的挑战 传统OCR技术在处理带水印、折痕或阴影的扫描件时常常束手无策。这些干扰因素会导致文字识别率大幅下降,特别是对于小字…...

解锁学术新境界:书匠策AI——你的毕业论文智能导航员

在学术的浩瀚海洋中,每一位即将扬帆远航的毕业生都面临着撰写毕业论文这一艰巨任务。它不仅是对所学知识的综合检验,更是开启未来学术或职业道路的一把钥匙。然而,面对堆积如山的文献、错综复杂的逻辑架构,以及那令人头疼的格式规…...

书匠策AI:期刊论文写作的“智慧导航仪”

在学术的浩瀚宇宙中,期刊论文是那璀璨的星辰,照亮着知识传承与创新的前行道路。对于每一位投身学术领域的人来说,撰写一篇高质量的期刊论文,是实现自我价值、推动学科发展的重要途径。然而,论文写作之路充满挑战&#…...

douyin-downloader:基于智能编排架构的抖音内容下载效率革命

douyin-downloader:基于智能编排架构的抖音内容下载效率革命 【免费下载链接】douyin-downloader A practical Douyin downloader for both single-item and profile batch downloads, with progress display, retries, SQLite deduplication, and browser fallback…...

终极指南:3步实现Electron asar文件的可视化管理,告别复杂命令行!

终极指南:3步实现Electron asar文件的可视化管理,告别复杂命令行! 【免费下载链接】WinAsar Portable and lightweight GUI utility to pack and extract asar( Electron archive ) files, Only 551 KB! 项目地址: https://gitcode.com/gh_…...

探秘书匠策AI:开启期刊论文写作的“智慧宝藏”

在学术的浩瀚宇宙中,期刊论文是那璀璨的星辰,照亮着知识传承与创新的道路。对于每一位投身学术领域的人来说,撰写一篇高质量的期刊论文,就如同打造一件珍贵的艺术品,需要精心雕琢、反复打磨。然而,这一过程…...

OpenCore Legacy Patcher深度解析:如何让老旧Mac重获新生运行最新macOS

OpenCore Legacy Patcher深度解析:如何让老旧Mac重获新生运行最新macOS 【免费下载链接】OpenCore-Legacy-Patcher Experience macOS just like before 项目地址: https://gitcode.com/GitHub_Trending/op/OpenCore-Legacy-Patcher OpenCore Legacy Patcher是…...

如何5分钟成为按键显示大师:YetAnotherKeyDisplayer完全指南

如何5分钟成为按键显示大师:YetAnotherKeyDisplayer完全指南 【免费下载链接】YetAnotherKeyDisplayer App for displaying pressed keys of the keyboard 项目地址: https://gitcode.com/gh_mirrors/ye/YetAnotherKeyDisplayer 你是否曾经在直播游戏时&…...

中小企业流程目标制定:三步找准适合你的发展节奏-佛山鼎策创局破局增长咨询

好多中小企业的老板还有管理者,在动手制定流程之际,常常容易陷入两种极端的情形。其一,他们会径直套用大公司那般复杂繁琐的体系,从而致使员工们怨声连连,工作积极性遭受极大打击,整个企业运营效率变得很低…...

Snap.Hutao:基于现代.NET架构的原神游戏数据管理技术方案

Snap.Hutao:基于现代.NET架构的原神游戏数据管理技术方案 【免费下载链接】Snap.Hutao 实用的开源多功能原神工具箱 🧰 / Multifunctional Open-Source Genshin Impact Toolkit 🧰 项目地址: https://gitcode.com/GitHub_Trending/sn/Snap.…...

WindowResizer终极指南:免费工具强制调整任意窗口尺寸的完整教程

WindowResizer终极指南:免费工具强制调整任意窗口尺寸的完整教程 【免费下载链接】WindowResizer 一个可以强制调整应用程序窗口大小的工具 项目地址: https://gitcode.com/gh_mirrors/wi/WindowResizer 还在为那些固执的应用程序窗口烦恼吗?有些…...

从按钮到仪表盘:手把手教你用LVGL v8.3打造一个智能家居控制面板UI

从按钮到仪表盘:手把手教你用LVGL v8.3打造一个智能家居控制面板UI 在嵌入式设备上构建美观且响应迅速的图形界面一直是开发者的挑战。LVGL(Light and Versatile Graphics Library)作为一款开源嵌入式图形库,凭借其轻量级、硬件加…...

LangChain实战:从概念到企业级AI应用开发的完整指南

1. 项目概述与核心价值看到“huangjia2019/langchain-in-action”这个项目标题,很多对AI应用开发感兴趣的朋友,尤其是那些已经接触过OpenAI API但苦于如何构建复杂、稳定应用的开发者,应该会眼前一亮。这不仅仅是一个简单的代码仓库&#xff…...

MPLS跨域Option A、B、C怎么选?一张图看懂三种方案的区别与选型实战

MPLS跨域Option A/B/C实战选型指南:架构师必备的决策框架 当企业网络跨越多个运营商或大型自治系统时,MPLS VPN的互联方案选择往往成为网络架构师最头疼的问题。Option A的简单直接、Option B的折中平衡、Option C的高度扩展,每种方案背后都代…...

从‘非黑即白’到‘亦此亦彼’:用Python实现FCM模糊聚类,并可视化每一步迭代过程

模糊聚类的艺术:用Python动态解析FCM算法的迭代之美 第一次接触模糊C均值聚类时,我被它优雅地处理"灰色地带"的能力所震撼——与K均值等硬聚类不同,FCM允许数据点同时属于多个类别,只是程度不同。这种思维方式更贴近现实…...

【MCP 2026车载系统适配黄金法则】:20年资深架构师亲授7步零失误落地流程

更多请点击: https://intelliparadigm.com 第一章:MCP 2026车载系统适配的底层认知与战略定位 MCP(Modular Computing Platform)2026 是面向智能网联汽车的新一代车载计算架构,其核心特征在于硬件抽象层(H…...

WPS-Zotero插件:跨平台科研写作的架构解析与实践指南

WPS-Zotero插件:跨平台科研写作的架构解析与实践指南 【免费下载链接】WPS-Zotero An add-on for WPS Writer to integrate with Zotero. 项目地址: https://gitcode.com/gh_mirrors/wp/WPS-Zotero 在跨平台科研协作环境中,文献引用管理是Linux用…...

如何在Blender中轻松处理3MF格式:完整3D打印文件转换指南

如何在Blender中轻松处理3MF格式:完整3D打印文件转换指南 【免费下载链接】Blender3mfFormat Blender add-on to import/export 3MF files 项目地址: https://gitcode.com/gh_mirrors/bl/Blender3mfFormat 你是否在寻找一个能让Blender完美支持3D打印文件格式…...

如何免费解锁加密音乐:Unlock-Music 完整使用指南与解密方案

如何免费解锁加密音乐:Unlock-Music 完整使用指南与解密方案 【免费下载链接】unlock-music 在浏览器中解锁加密的音乐文件。原仓库: 1. https://github.com/unlock-music/unlock-music ;2. https://git.unlock-music.dev/um/web 项目地址:…...

OpenFace终极指南:3天掌握面部行为分析核心技术

OpenFace终极指南:3天掌握面部行为分析核心技术 【免费下载链接】OpenFace OpenFace – a state-of-the art tool intended for facial landmark detection, head pose estimation, facial action unit recognition, and eye-gaze estimation. 项目地址: https://…...

别再乱改iptables了!搞懂Docker自动生成的DOCKER-USER链,安全配置不踩坑

深入理解Docker网络安全:DOCKER-USER链的正确使用姿势 当你在深夜调试Docker容器时,突然发现所有网络请求都神秘消失了——这可能是iptables规则被误操作的典型症状。许多开发者习惯直接修改FORWARD链或INPUT链,却不知Docker早已为我们准备了…...

Windows 11 22631系统优化:深入解析ExplorerPatcher如何修复Win+X快捷键失效问题

Windows 11 22631系统优化:深入解析ExplorerPatcher如何修复WinX快捷键失效问题 【免费下载链接】ExplorerPatcher This project aims to enhance the working environment on Windows 项目地址: https://gitcode.com/GitHub_Trending/ex/ExplorerPatcher 你…...

Blender贝塞尔曲线 vs NURBS曲线:建模时到底该选哪个?从原理到实战一次讲清

Blender贝塞尔曲线 vs NURBS曲线:从数学原理到工业级建模决策指南 在三维建模的艺术与科学中,曲线是构建复杂形态的基础语言。当Blender用户面对角色服装的飘逸褶皱、汽车外壳的流畅曲面或建筑装饰的精确纹样时,选择正确的曲线类型往往决定了…...

别只盯着重试!深入理解RocketMQ的死信队列与消费堆积排查指南

别只盯着重试!深入理解RocketMQ的死信队列与消费堆积排查指南 凌晨三点,监控系统突然告警:核心业务的消息堆积量突破50万条。你打开控制台,发现死信队列正以每分钟上千条的速度增长——这不是简单的网络抖动,而是系统正…...

3分钟掌握OFD转PDF:免费开源工具Ofd2Pdf完整使用教程

3分钟掌握OFD转PDF:免费开源工具Ofd2Pdf完整使用教程 【免费下载链接】Ofd2Pdf Convert OFD files to PDF files. 项目地址: https://gitcode.com/gh_mirrors/ofd/Ofd2Pdf 还在为OFD格式文件无法在普通设备上打开而烦恼吗?Ofd2Pdf是一款完全免费的…...

3分钟极速解锁:ncmppGui让你的网易云音乐真正自由

3分钟极速解锁:ncmppGui让你的网易云音乐真正自由 【免费下载链接】ncmppGui 一个使用C编写的极速ncm转换GUI工具 项目地址: https://gitcode.com/gh_mirrors/nc/ncmppGui 你是否曾在网易云音乐下载了心爱的歌曲,却发现只能在官方App中播放&#…...

从DARPA的CommEx项目看认知抗干扰:如何让你的通信系统在复杂电磁环境下“活”下来?

认知抗干扰通信:从军事科技到民用落地的技术迁移路径 想象一下这样的场景:你正在用无人机进行电力巡检,突然图传画面出现雪花噪点,控制信号延迟飙升——附近新建的5G基站与工业Wi-Fi正在同一频段爆发"频谱战争"。这不是…...

网络安全新手入门:从技能图谱到实战演练的完整学习路径

1. 项目概述:一个面向网络安全初学者的技能图谱与实践仓库最近在GitHub上看到一个挺有意思的项目,叫“Anthropic-Cybersecurity-Skills”。乍一看标题,可能会觉得这又是一个堆砌工具列表的“Awesome”类仓库。但点进去仔细研究后,…...

量化小白也能懂:拆解‘神奇九转’公式背后的逻辑与在东方财富上的实战用法

量化小白也能懂:拆解‘神奇九转’公式背后的逻辑与在东方财富上的实战用法 第一次在东方财富客户端看到K线图上跳动的数字"9"时,我还以为是软件出了bug。后来才知道,这是被称为"神奇九转"的技术指标在发出信号——它正在…...