golang动态限制并发数量

时间:2025-02-26 20:43:39

使用go可以很方便的对并发进行限制,只需创建一个buffer channel,然后新建goroutine时往channel写入一个值,然后操作完成后读取一个值即可。

但有时我们需要动态调整并发数量,此时使用buffer channel可能不太方便,在这里我使用了来实现了可动态调整的限制器。代码较少,比较简单。

package util

import (
	"sync"
)

type concurrencyLimiter struct {
	runningNum  int32
	limit       int32
	blockingNum int32
	cond        *
	mu          *
}

// NewConcurrencyLimiter 创建一个并发限制器,limit为并发限制数量,可通过 Reset() 动态调整limit。
// 每次调用 Get() 来获取一个资源,然后创建一个协程,完成任务后通过 Release() 释放资源。
func NewConcurrencyLimiter(limit int32) *concurrencyLimiter {
	l := new()
	return &concurrencyLimiter{
		limit: limit,
		cond:  (l),
		mu:    l,
	}
}

// Reset 可更新limit,需要保证limit > 0
func (c *concurrencyLimiter) Reset(limit int32) {
	()
	defer ()

	tmp := 
	 = limit
	blockingNum := 
	// 优先唤醒阻塞的任务
	if limit-tmp > 0 && blockingNum > 0 {
		for i := int32(0); i < limit-tmp && blockingNum > 0; i++ {
			()
			blockingNum--
		}
	}
}

// Get 当 concurrencyLimiter 没有资源时,会阻塞。
func (c *concurrencyLimiter) Get() {
	()
	defer ()

	if  <  {
		++
		return
	}
	++
	for !( < ) {
		()
	}
	++
	--
}

// Release 释放一个资源
func (c *concurrencyLimiter) Release() {
	()
	defer ()

	if  > 0 {
		--
		()
		return
	}

	--
}