Golang 并发小结

news2025/5/23 6:29:09

并发问题概览

问题类型描述
数据竞争多个协程对共享变量进行非同步读写操作
死锁多个协程互相等待对方释放资源
活锁协程不断尝试获取资源但始终失败
协程泄漏协程未能及时退出,程序中 goroutine 数量飙升
Channel 误用通道未关闭、重复关闭、关闭后写入等问题
调度抖动非预期的调度行为导致响应不稳定

数据竞争

当两个或多个 goroutine 同时读写一个变量,并且至少有一个是写操作,而又没有同步措施时,就会发生数据竞争。

var count int

func add() {
	for i := 0; i< 1000; i++ {
		count++
	}
}

func main() {
	go add()
	go add()
	time.Sleep(time.Second)
	fmt.Println(count)
}

死锁

死锁是指两个或多个协程相互等待,导致程序永久阻塞。

func main() {
	ch := make(chan int)
	// 没有其他协程接收,死锁
	ch <- 1
}
func main() {
	ch1 := make(chan int)
	ch2 := make(chan int)

	go func() {
		<-ch1
		ch2 <- 1
	}()
	
	go func() {
		<-ch2
		ch1 <- 1
	}()
	
	// 程序卡死
	time.Sleep(time.Second * 2)
}

协程泄漏

程序创建了大量 goroutine,但它们没有退出条件,一直处于阻塞或者等待状态,导致程序资源消耗飙升。

func main() {
	ch := make(chan int)
	for {
		go func() {
			// 不断产生阻塞的 goroutine,直到内存耗尽为止
			<-ch
		}()
	}
}

Channel 误用

// 写入已关闭通道
ch := make(chan int)
close(ch)
ch <- 1 // panic

// 重复关闭通道
close(ch)
close(ch) // panic

// 从空通道中读取,没有写入,造成死锁
<-ch

调度器问题与性能抖动

  • 协程爆炸。短时间内创建了大量 goroutine,可能会导致 CPU 抖动、调度混乱。
  • 大量阻塞系统调用。一个协程如果陷入系统调用阻塞,会被 OS 挂起,从而影响调度。
  • 非公平调度。虽然 Go 的调度器基于 GMP 模型,但仍存在协程饥饿的可能。

最佳实践总结

类型建议
数据共享使用 Channel 或者 sync.Mutex/sync.RWMUtex 做同步
goroutine 控制使用 WaitGroup 或者 context 管理协程生命周期
Channel 操作所有写操作前确保通道未关闭;关闭通道应由发送方负责
并发任务分发使用协程池(限制并发数)避免系统资源耗尽
调试工具使用 race、pprof、trace、delve
日志分析打印 goroutine ID,观察并发流程

实际案例分析

抓取系统协程泄漏

现象:

  • CPU 使用率低
  • 内存占用持续上涨
  • goroutine 数量不断增长

分析:

  • 使用 pprof 查看 goroutine 源码位置
  • 定位原因是某个 select 分支缺少 <-done,导致协程无法退出

处理:

  • 所有的 for + select 中都加上 ctx.Done() 处理退出
func worker() {
    go func() {
        for {
            select {
            case msg := <-someChan:
                // 处理消息
                fmt.Println(msg)
            // ❌ 没有退出条件,协程永远不会退出
            }
        }
    }()
}
func worker(ctx context.Context) {
    go func() {
        for {
            select {
            case msg := <-someChan:
                fmt.Println(msg)
            case <-ctx.Done():
                // ✅ 收到取消信号,退出协程
                fmt.Println("worker exiting")
                return
            }
        }
    }()
}

ctx, cancel := context.WithCancel(context.Background())
worker(ctx)

// 一段时间后或某个条件下,调用 cancel() 来通知协程退出
time.Sleep(5 * time.Second)
cancel()

异步任务竞争导致数据错乱

现象:

  • 后台异步处理任务对全局 map 并发写入

分析:

  • 偶发出现数据错误,调试困难

处理:

  • 使用 sync.Mutex 或者 sync.Map
// 全局 map,非线程安全
var data = make(map[int]int)

func main() {
    for i := 0; i < 100; i++ {
        go func(i int) {
            data[i] = i // 🚨 多个协程同时写入 map,会导致数据竞争或 panic
        }(i)
    }

    time.Sleep(1 * time.Second)
    fmt.Println("done")
}
var (
    data = make(map[int]int)
    mu   sync.Mutex
)

func main() {
    for i := 0; i < 100; i++ {
        go func(i int) {
            mu.Lock()
            data[i] = i
            mu.Unlock()
        }(i)
    }

    time.Sleep(1 * time.Second)
    fmt.Println("done")
}
var data sync.Map

func main() {
    for i := 0; i < 100; i++ {
        go func(i int) {
            data.Store(i, i)
        }(i)
    }

    time.Sleep(1 * time.Second)

    data.Range(func(k, v interface{}) bool {
        fmt.Printf("key: %v, value: %v\n", k, v)
        return true
    })
}

高并发下创建全局计数器

  • 推荐使用 sync/atomic 包。sync/atomic 提供了原子操作的能力,在无需加锁的前提下,保证线程安全,适用于计数器等场景。
var globalCounter int64

func worker(wg *sync.WaitGroup) {
	defer wg.Done()
	
	// 原子加1,确保并发安全
	atomic.AddInt64(&globalCounter, 1)
}

func main() {
	var wg sync.WaitGroup
	
	wg.Add(1000)
	
	for i := 0; i < 1000; i++ {
		go worker(&wg)
	}
	
	// 确保主 goroutine 等待所有子 goroutine 完成
	wg.Wait()
	fmt.Println("计数器值:", globalCounter)
}
  • 使用 sync.Mutex。线程安全但是性能略低,适用于复杂逻辑下的线程保护,不推荐用于简单加减场景。
var counter int
var mu sync.Mutex

func main() {
	mu.Lock()
	counter++
	mu.UnLock()
}
  • 使用 Channel 实现计数。性能不如原子操作,适用于有通道通信需求的场景。
var counter = make(chan int, 1)

func init() {
	counter <- 0
}

func main() {
	v := <-counter
	v++
	counter <- v
}

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2383685.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

军事目标系列之迷彩作战人员检测数据集VOC+YOLO格式2755张1类别

数据集格式&#xff1a;Pascal VOC格式YOLO格式(不包含分割路径的txt文件&#xff0c;仅仅包含jpg图片以及对应的VOC格式xml文件和yolo格式txt文件) 图片数量(jpg文件个数)&#xff1a;2755 标注数量(xml文件个数)&#xff1a;2755 标注数量(txt文件个数)&#xff1a;2755 …

node12.22.12在nvm中安装

1、安装nvm 官网&#xff1a;https://nvm.uihtm.com/ 下载&#xff0c;安装 nvm -v 1.2.22、通过 nvm install 12.22.12 安装报错&#xff0c;找不到此版本 通过下载 https://nodejs.org/zh-cn/downloadzip文件 解压 3、查看nvm 安装路径 nvm root4、在目录下新建文件夹 v…

【生态信息】开源软件全方位解析

开源软件(0pen Source Software&#xff0c;0ss)是指其源代码可以公开发布、查看、使用和修改的软件。这一概念的核心在于开放性和共享性&#xff0c;允许开发者自由地使用、修改、分发以及改进软件。开源软件通常遵循特定的开源许可证&#xff0c;这些许可证确保了软件的自由使…

FastAPI在 Nginx 和 Docker 环境中的部署

目录 实现示例1. 项目结构2. FastAPI 应用 (app/main.py)3. 依赖文件 (app/requirements.txt)4. Dockerfile5. Nginx 配置 (nginx/nginx.conf)6. Docker Compose 配置 (docker-compose.yml) 使用方法修改代码后更新 实现示例 接下来创建一个简单的示例项目&#xff0c;展示如何…

计算机网络相关面试题

一、HTTP1.1和HTTP2的区别 HTTP/1&#xff08;主要指 HTTP/1.1&#xff09;和 HTTP/2 是 Web 协议发展中的两个重要版本&#xff0c;二者在性能、协议机制和功能特性上有显著差异。以下从多个维度对比分析&#xff0c;并结合具体案例说明&#xff1a; 一、连接与请求处理方式 1…

根据当前日期计算并选取上一个月和上一个季度的日期范围,用于日期控件的快捷选取功能

1.选择月份范围 代码如下&#xff1a; <el-date-picker v-model"value" type"monthrange" align"right" unlink-panels range-separator"至"start-placeholder"开始月份" end-placeholder"结束月份" :picker-…

【C++】set、map 容器的使用

文章目录 1. set 和 multiset 的使用1.1 set类的介绍1.2 set的构造和迭代器1.3 set 的增删查1.4 insert和迭代器调用示例1.5 find和erase使用示例1.6 multiset和set的差异 2. map 和 multimap 的使用2.1 map 类的介绍2.2 pair 类型介绍2.3 map 的构造和迭代器2.4 map 的增删查2…

【MySQL】第1节|全面理解MySQL架构

快速安装MySQL 使用Docker快速安装mysql8 docker run -d \ --name mysql8 \ --privilegedtrue \ --restartalways \ -p 13306:3306 \ -v /home/mysql8/data:/var/lib/mysql \ -v /home/mysql8/config:/etc/mysql/conf.d \ -v /home/mysql8/logs:/logs \ -e MYSQL_ROOT_PAS…

YOLOv8模型剪枝笔记(DepGraph和Network Slimming网络瘦身)

文章目录 一、DepGraph剪枝&#xff08;1&#xff09;项目准备1&#xff09;剪枝基础知识2&#xff09;DepGraph剪枝论文解读12&#xff09;DepGraph剪枝论文解读23&#xff09;YOLO目标检测系列发展史4&#xff09;YOLO网络架构 &#xff08;2&#xff09;项目实战&#xff08…

App Builder技术选型指南:从AI编程到小程序容器,外卖App开发实战

在2025年快速迭代的技术生态中&#xff0c;开发者构建App的路径愈发多样化。本文以开发一个同城外卖App为例&#xff0c;对比当前主流的AI编程工具&#xff08;如Cursor、GitHub Copilot、Trae&#xff09;与小程序容器技术&#xff08;如FinClip&#xff09;的优劣势、难易度及…

TDengine 高可用——三副本

概述 TDengine 的三副本方案采用 RAFT 算法来实现数据的一致性&#xff0c;包括元数据和时序数据。一个虚拟节点组&#xff08;VGroup&#xff09;构成了一个 RAFT 组&#xff1b;VGroup 中的虚拟节点&#xff08;Vnode&#xff09;&#xff0c;便是该 RAFT 组的成员节点&…

el-table高度自适应、数据查询后高度展示错误问题

在很多场景中我们需要实现表格的高度自适应&#xff0c;即不同屏幕大小下需要使用不同的高度来设置表格&#xff0c;那么我们应该如何实现呢&#xff1f; 1.el-table实现高度自适应 通过以下代码可以实现表格根据屏幕进行自适应 设置表格的高度 <el-table ref"tableD…

Java接口设计:ECharts热力图的绘制

引言 热力图是一种强大的数据可视化工具&#xff0c;通过颜色的深浅变化来直观展示数据密度和分布情况。在现代Web应用中&#xff0c;ECharts作为一款流行的开源数据可视化库&#xff0c;提供了丰富的图表类型&#xff0c;其中热力图因其直观的视觉效果而被广泛使用。本教程将…

深入理解 MongoDB 的 _id 和 ObjectId:从原理到实践

在 MongoDB 的世界中&#xff0c;_id 字段和 ObjectId 是每个开发者都必须理解的核心概念。作为 MongoDB 文档的唯一标识符&#xff0c;它们不仅影响着数据库的设计&#xff0c;也直接关系到应用的性能和扩展性。本文将全面剖析 _id 和 ObjectId 的工作原理、实际应用场景以及最…

【notepad++如何设置成中文界面呢?】

“Notepad”是一款非常强大的文本编辑软件&#xff0c;将其界面设置成中文的方法如下&#xff1a; 一、工具&#xff0f;原料&#xff1a; 华为 Matebook 15、Windows 10、Notepad 8.4.6。 二 、具体步骤&#xff1a; 1、找到任意一个文本文件&#xff0c;比如 txt 格式的文…

当AI遇上科研:北大“科学导航”重塑学术探索全流程

在人工智能技术迅猛发展的当下&#xff0c;一场悄然发生的变革&#xff0c;正在改变我们“做科研”的方式。近日&#xff0c;北京大学科学智能研究院联合深势科技&#xff0c;正式上线一款面向科研人员的一体化AI平台——Science Navigator&#xff08;科学导航&#xff09;。这…

PHP学习笔记(八)

目录 返回值 return的使用 多值返回的替代方案 可变函数 内部&#xff08;内置&#xff09;函数 匿名函数 静态匿名函数 返回值 值通过可选参数的返回语句返回 return的使用 函数不能返回多个值&#xff0c;但可以通过返回一个数组来得到类似的效果 函数返回一个引用&am…

C#中WSDL文件引用问题

工作中碰到一个单点登录的需求&#xff0c;因为这个需求同事别的系统已经做过&#xff0c;我这边只需要把代码迁移过来即可&#xff0c;但是迁移过程中发现引用WSDL文件后&#xff0c;方法报错的问题&#xff0c;各种排查代码之后未解决&#xff0c;最终发现是WSDL文件引用的问…

养生新策:五维开启健康生活

一、饮食&#xff1a;天然食材&#xff0c;科学配比 以 “原型食物” 为主&#xff0c;减少加工食品摄入。早餐用鹰嘴豆泥涂抹全麦面包&#xff0c;搭配水煮蛋和一小把蓝莓&#xff0c;兼顾蛋白质与抗氧化物质&#xff1b;午餐选择藜麦饭&#xff0c;配上香煎鸡胸肉和蒜蓉空心…

centos8 配置网桥,并禁止kvm默认网桥

环境背景&#xff1a; 我使用vmware部署了一台kvm服务器&#xff0c;网络模式是nat。我想要kvm创建的虚拟机可以访问公网&#xff1b;所以kvm默认的地址不行&#xff0c;我必须使用nat地址才可以&#xff1b; 实现方式&#xff1a; 创建一个网桥&#xff0c;将本地的网络接口…