Go 设置并发控制数量 【go并发模型】

背景:go的并发控制也是老生常谈,在公司业务中也是经常出现

谈谈我们这次并发模型的适用场景:要处理的任务很多比如有10000个,没开并发的时候我们要一个一个进行执行这个时候其实无论是cpu压力还是数据库和redis压力都比较小也就是说它们现在还很闲,我们可以给它们加并发压榨cpu和数据库的工作效率

限制:理论上讲并发数小于任务数,总不能1000个任务开2000个并发,首先就像1000个馒头让2000个人去吃一样撤,其次是开2000个并发如果任务比较重那数据库也受不了报警

我给出的并发模型的可以通过修改channel的容量来控制并发数

接下来看代码

Go 复制代码
package main

import (
	"fmt"
	"sync"
	"time"
)

func main() {
	GNUM := 100 //携程并发数
	ch := make(chan struct{}, GNUM)
	wg := sync.WaitGroup{}
	start := time.Now().Second() //记录开始时间
	for i := 1; i <= 1000; i++ {
		ch <- struct{}{}
		wg.Add(1)
		go func(i int) {
			defer func() {
				fmt.Printf("task%d执行完毕\n", i)
				<-ch
				wg.Done()
			}()
			fmt.Printf("执行task%d   \n", i)
			time.Sleep(1 * time.Second)
		}(i)
	}
	wg.Wait()
	close(ch)
	end := time.Now().Second()                       //记录结束时间
	fmt.Printf("并发数:%d 时 花费时间为:%d", GNUM, end-start) //输出处理任务的总时间 单位S

}

这个代码假设是每个任务执行时间是1秒如果我们不开并发执行1000个任务是1000秒但如果我们开100个并发只需要10秒 1000个并发只需要1秒 10个并发小于10秒

相关推荐
有代理ip16 小时前
Python 与 Golang 爬虫的隐藏优势
爬虫·python·golang
天远云服18 小时前
天远车辆过户查询API微服务实战:用Go语言构建高性能车况溯源系统
大数据·微服务·架构·golang
女王大人万岁18 小时前
Go标准库 sync 详解
服务器·开发语言·后端·golang
小高Baby@18 小时前
session、cookie、Jwt-token
开发语言·后端·golang
Grassto20 小时前
12 go.sum 是如何保证依赖安全的?校验机制源码解析
安全·golang·go·哈希算法·go module
小二·20 小时前
Go 语言系统编程与云原生开发实战(第12篇)云原生部署实战:Helm Chart × GitOps × 多环境管理(生产级落地)
开发语言·云原生·golang
天空属于哈夫克320 小时前
Go 语言实战:构建一个企微外部群“技术贴收藏夹”小程序后端
小程序·golang·企业微信
小二·20 小时前
Go 语言系统编程与云原生开发实战(第13篇)工程效能实战:Monorepo × 依赖治理 × 构建加速(10万行代码实测)
开发语言·云原生·golang
暴躁小师兄数据学院20 小时前
【WEB3.0零基础转行笔记】Golang编程篇-第4讲:Go语言中的流程控制
开发语言·后端·golang·web3·区块链
lingggggaaaa2 天前
安全工具篇&Go魔改二开&Fscan扫描&FRP代理&特征消除&新增扩展&打乱HASH
学习·安全·web安全·网络安全·golang·哈希算法