素手烹茶|Ants - 高性能低损耗的 Goroutine 池

Go 语言最大的特色之一 , 就是其从语言的层面支持并发 。 Go 语言使用了其特有的 goroutine 作为最基本的并发执行单元 , 以协程的方式 , 实现了更加轻量和高效的并发执行 。 然而 , goroutine 缺乏一个高级的管理机制 , 原生情况下使用 , 要实现动态调整数量、内存资源复用、错误处理等 , 往往需要编写比较多的底层代码逻辑 。 Ants , 这个 goroutine 池实现 , 提供了对于大规模 goroutine 的管理功能 , 相比原生实现 , 资源使用率和执行性能都有了很大的提升 。
素手烹茶|Ants - 高性能低损耗的 Goroutine 池ants pool
简介Ants , 是 panjf2000 在 github 上开源的高性能 goroutine 池 , 项目位于, 目前版本为 v2.4.0 。 Ants 实现了对于大规模 goroutine 的调度管理和复用 , 允许使用者在开发 Golang 并发程序时限制 goroutine 数量 , 复用资源 , 达到更高效执行任务的效果 。 Ants 提供了大量有用的接口 , 包括:任务提交、获取运行中的 goroutine 数量、动态调整池带下、释放和重启池等 。 Ants 通过优秀的资源复用策略 , 极大地节省内存使用量 , 在大规模批量并发任务场景下 , 比原生的 goroutine 实现的并发具有更高的性能 。
素手烹茶|Ants - 高性能低损耗的 Goroutine 池Github项目
安装Ants 使用 Go 语言开发 , 需要 Go 1.8.x 以上 。 Ants 目前同时维护 v1 和 v2 版本 , 安装 v1 版本:
go get -u github.com/panjf2000/antsv2 版本需要使用 go module 支持 , 开启 GO111MODULE=on:
go get -u github.com/panjf2000/ants/v2
素手烹茶|Ants - 高性能低损耗的 Goroutine 池godoc文档
示例Ants 对于任务的执行原理比较直观 , 通过一个工作池的形式维护 goroutine 集合 。 当向工作池提交任务时 , 从池中取出 worker 来执行 。 如果已经存在可用的 goroutine 了 , 那么直接开始执行 , 如果没有 , 则需要判断是否已经达到容量上限 。 如果还没有超过 , 那就意味着可用的 worker 比容量更少 , 此时启动新的 worker 来执行 。 而如果容量已经用完 , 就依据是否为阻塞模式 , 来马上返回 , 或是阻塞等待 。
素手烹茶|Ants - 高性能低损耗的 Goroutine 池ants工作池等待
当任务执行完毕 , 对应的 worker 就会得到释放 , 重新回到池中 , 等待下一个任务的调度 , 实现 goroutine 的复用 。
素手烹茶|Ants - 高性能低损耗的 Goroutine 池ants复用
完整的工作池 worker 调度的逻辑和流程如下:
素手烹茶|Ants - 高性能低损耗的 Goroutine 池ants任务执行流程
Ants 支持不同的使用方式 , 可以直接使用 Submit 接口 , 使用默认配置的工作池完成任务执行 。 Submit 函数的定义如下:
func Submit(task func()) error通过提供一个函数类型的任务参数 , 来把任务提交到工作池执行 。 我们来看一个简单的使用例子:
package mainimport ( "fmt" "sync" "time" "github.com/panjf2000/ants/v2")func demoFunc() { time.Sleep(10 * time.Millisecond) fmt.Println("Hello World!")}func main() { defer ants.Release() runTimes := 1000 var wg sync.WaitGroup syncCalculateSum := func() {demoFunc()wg.Done() } for i := 0; i


推荐阅读