【go每日一题】:并发任务调度器

问题描述

需要实现一个并发的任务调度器,能够处理多个并发任务并限制同时执行的任务数量。

每个任务是一个函数,任务执行可能需要一段时间。

调度器的目的是控制同时执行的任务数量(即并发度),以防止任务数过多导致系统资源过载。

代码

go 复制代码
package test

import (
	"fmt"
	"math/rand"
	"sync"
	"testing"
	"time"
	"trpc.group/trpc-go/trpc-go/log"
)

/**
你需要实现一个并发的任务调度器,能够处理多个并发任务并限制同时执行的任务数量。
每个任务是一个函数,任务执行可能需要一段时间。
调度器的目的是控制同时执行的任务数量(即并发度),以防止任务数过多导致系统资源过载。
*/

type TaskDispatcher struct {
	maxTask int
	c       chan func()
	wg      *sync.WaitGroup // 指针不进行初始化是nil
}

func NewTaskDispatcher(maxTaskNum int, chanCap int) *TaskDispatcher {
	return &TaskDispatcher{
		maxTask: maxTaskNum,
		c:       make(chan func(), chanCap),
		wg:      new(sync.WaitGroup),
	}
}

func (td *TaskDispatcher) AddNewTask(f func()) bool {
	select {
	case td.c <- f:
		td.wg.Add(1) // 这里加,消费完毕减少
		return true
	case <-time.After(3 * time.Second):
		return false
	}
}

func (td *TaskDispatcher) RunDispatcher() {
	for i := 0; i < td.maxTask; i++ {
		go func(i int) {
			for f := range td.c {
				log.Info(fmt.Sprintf("当前第%d个协程正在执行任务", i))

				if f != nil {
					f()
				}

				time.Sleep(time.Second * time.Duration(rand.Intn(3)+1))
				fmt.Println("当前函数执行完毕")
				td.wg.Done()
			}
		}(i)
	}
}

func (td *TaskDispatcher) StopDispatcher() {

	defer close(td.c)
	td.wg.Wait()
}

func TestTaskDispatcher(t *testing.T) {
	td := NewTaskDispatcher(3, 10)

	td.RunDispatcher() //channel先有接收方,才向channel中发数据

	for i := 0; i < 20; i++ {
		td.AddNewTask(func() {
			fmt.Printf("这里是任务%v\n", i)
		})
	}

	td.StopDispatcher()
}
相关推荐
PHP实战开发录5 小时前
PHP脚本手动能跑定时任务却失败
开发语言·php·开发
郝学胜-神的一滴6 小时前
Effective Python 条款 10 :海象运算符_=
开发语言·python·程序人生·开源
wuyk5556 小时前
Python零基础入门第十四章:异常处理(try-except)
开发语言·python
wuyk5556 小时前
【Socket 进阶之路】第 3 章 TCP 三次握手 & 四次挥手深度剖析|连接建立、断开、状态机、TIME_WAIT 核心工程问题
服务器·开发语言·网络·物联网·网络协议·tcp/ip
卷无止境9 小时前
智能体开发环境ADE浅析,编程工具的下一次范式跃迁
后端·python
彧azz12 小时前
图的存储结构详解:邻接矩阵的原理、实现与应用
开发语言·数据结构·学习·php
平头哥AI12 小时前
Day 22 _ 包装错误别丢链_%w、errors.Is 与 errors.As
android·服务器·学习·golang·go
嵌入式学习菌12 小时前
Modbus‑RTU 数据类型分析
开发语言·单片机·bug
码事漫谈12 小时前
DeepSeek 这波操作很凶
后端
matlab代码13 小时前
基于matlab数字图像处理的指纹识别系统【源码68期】
开发语言·matlab