Golang Channel的一些妙用

2024-08-23 20:58
文章标签 golang channel 妙用

本文主要是介绍Golang Channel的一些妙用,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

Golang中通过我们使用Channel来传递信息、信号,经典的如生产者消费者、退出信号等, 那么除此之外Channel还有哪些不常见的用法。

限制并发数

Golang原生提供了强大的并发原语,但如果无节制的使用大量Goroutine,并发过大会造成资源浪费,严重时会导致程序崩溃。使用带缓冲区的Channel可以解决此类问题。

在Golang的godoc/gatevfs中实现了对最大虚拟文件的并发限制。

// New returns a new FileSystem that delegates to fs.
// If gateCh is non-nil and buffered, it's used as a gate
// to limit concurrency on calls to fs.
func New(fs vfs.FileSystem, gateCh chan bool) vfs.FileSystem {if cap(gateCh) == 0 {return fs}return gatefs{fs, gate(gateCh)}
}type gate chan boolfunc (g gate) enter() { g <- true }
func (g gate) leave() { <-g }

通过带缓存的Channel,每次打开文件时调用enter发生数据到Channel,当文件关闭时调用leave读取Channel数据,当前Channel满后再次读取变会阻塞,直到有资源被释放,从而达到限制并发数的目的。

func (fs gatefs) Open(p string) (vfs.ReadSeekCloser, error) {fs.enter()defer fs.leave()rsc, err := fs.fs.Open(p)if err != nil {return nil, err}return gatef{rsc, fs.gate}, nil
}

可以配合WaitGroup来实现最大并发数的控制,具体代码如下:

// control number
type Gocontrol struct {ch chan struct{}wg sync.WaitGroup
}func NewGocontrol(number int) *Gocontrol {return &Gocontrol{ch: make(chan struct{}, number),}
}func (g *Gocontrol) Enter() {g.ch <- struct{}{}
}func (g *Gocontrol) Leave() {<-g.ch
}func (g *Gocontrol) Run(f func()) {g.Enter()g.wg.Add(1)go func() {defer g.Leave()defer g.wg.Done()f()}()
}func (g *Gocontrol) Wait() {g.wg.Wait()
}

测试运行,创建100个任务,调用Gocontrol限制最大并发为10,运行runtime.NumGoroutine来获取当前Goroutine数

func RunGocontrol() {go func() {for {fmt.Printf("goroutine numbers: %v\n", runtime.NumGoroutine())time.Sleep(500 * time.Millisecond)}}()gctl := NewGocontrol(10)start := time.Now()for i := 0; i < 100; i++ {n := igctl.Run(func() {time.Sleep(1 * time.Second)fmt.Println("hello", n)})}gctl.Wait()dur := time.Since(start)fmt.Printf("run time: %v", dur)
}

运行结果显示,最大Goroutine数为12(包含1个主线程,1个监控线程,10个任务线程),符合预期

goroutine numbers: 12
run time: 10.002604769s

实现锁

除了调用sync包,使用Channel也可以实现锁,以互斥锁为例:

type ChLock chan struct{}func NewChLock() ChLock {return make(chan struct{}, 1)
}func (l ChLock) Lock() {l <- struct{}{}
}func (l ChLock) Unlock() {<-l
}

互斥锁通过容量为1的Channel实现互斥,同样借助多个Channel可以使用读写锁,通过关闭Channel可以实现类型Once的功能。

从源码层面分析,Channel其实是一个线程安全的环形队列,Channel定义在runtime/chan.go中:

type hchan struct {qcount   uint           // total data in the queuedataqsiz uint           // size of the circular queuebuf      unsafe.Pointer // points to an array of dataqsiz elementselemsize uint16closed   uint32elemtype *_type // element typesendx    uint   // send indexrecvx    uint   // receive indexrecvq    waitq  // list of recv waiterssendq    waitq  // list of send waiterslock mutex
}

其中包含了lock锁结构,这里的mutex不同于sync.Mutex,只在Runtime内部使用是一种低阶的同步原语,也没有提供Lock/Unlock方法,只能通过全局的lock/unlock/initlock等函数调用。

最后

本文介绍了一些Channel的妙用,限制并发数与实现锁等,通过示例及源码阐述其深层次的原因。

Explore more in https://qingwave.github.io

这篇关于Golang Channel的一些妙用的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1100478

相关文章

golang中reflect包的常用方法

《golang中reflect包的常用方法》Go反射reflect包提供类型和值方法,用于获取类型信息、访问字段、调用方法等,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值... 目录reflect包方法总结类型 (Type) 方法值 (Value) 方法reflect包方法总结

Golang如何对cron进行二次封装实现指定时间执行定时任务

《Golang如何对cron进行二次封装实现指定时间执行定时任务》:本文主要介绍Golang如何对cron进行二次封装实现指定时间执行定时任务问题,具有很好的参考价值,希望对大家有所帮助,如有错误... 目录背景cron库下载代码示例【1】结构体定义【2】定时任务开启【3】使用示例【4】控制台输出总结背景

Golang如何用gorm实现分页的功能

《Golang如何用gorm实现分页的功能》:本文主要介绍Golang如何用gorm实现分页的功能方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录背景go库下载初始化数据【1】建表【2】插入数据【3】查看数据4、代码示例【1】gorm结构体定义【2】分页结构体

在Golang中实现定时任务的几种高效方法

《在Golang中实现定时任务的几种高效方法》本文将详细介绍在Golang中实现定时任务的几种高效方法,包括time包中的Ticker和Timer、第三方库cron的使用,以及基于channel和go... 目录背景介绍目的和范围预期读者文档结构概述术语表核心概念与联系故事引入核心概念解释核心概念之间的关系

Golang 日志处理和正则处理的操作方法

《Golang日志处理和正则处理的操作方法》:本文主要介绍Golang日志处理和正则处理的操作方法,本文通过实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考... 目录1、logx日志处理1.1、logx简介1.2、日志初始化与配置1.3、常用方法1.4、配合defer

golang float和科学计数法转字符串的实现方式

《golangfloat和科学计数法转字符串的实现方式》:本文主要介绍golangfloat和科学计数法转字符串的实现方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望... 目录golang float和科学计数法转字符串需要对float转字符串做处理总结golang float

golang实现延迟队列(delay queue)的两种实现

《golang实现延迟队列(delayqueue)的两种实现》本文主要介绍了golang实现延迟队列(delayqueue)的两种实现,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的... 目录1 延迟队列:邮件提醒、订单自动取消2 实现2.1 simplChina编程e简单版:go自带的time

Golang实现Redis分布式锁(Lua脚本+可重入+自动续期)

《Golang实现Redis分布式锁(Lua脚本+可重入+自动续期)》本文主要介绍了Golang分布式锁实现,采用Redis+Lua脚本确保原子性,持可重入和自动续期,用于防止超卖及重复下单,具有一定... 目录1 概念应用场景分布式锁必备特性2 思路分析宕机与过期防止误删keyLua保证原子性可重入锁自动

golang 对象池sync.Pool的实现

《golang对象池sync.Pool的实现》:本文主要介绍golang对象池sync.Pool的实现,用于缓存和复用临时对象,以减少内存分配和垃圾回收的压力,下面就来介绍一下,感兴趣的可以了解... 目录sync.Pool的用法原理sync.Pool 的使用示例sync.Pool 的使用场景注意sync.

golang中slice扩容的具体实现

《golang中slice扩容的具体实现》Go语言中的切片扩容机制是Go运行时的一个关键部分,它确保切片在动态增加元素时能够高效地管理内存,本文主要介绍了golang中slice扩容的具体实现,感兴趣... 目录1. 切片扩容的触发append 函数的实现2. runtime.growslice 函数gro