Go Select的实现

2024-09-08 13:58
文章标签 实现 go select

本文主要是介绍Go Select的实现,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

select语法总结 select对应的每个case如果有已经准备好的case 则进行chan读写操作;若没有则执行defualt语句;若都没有则阻塞当前goroutine,直到某个chan准备好可读或可写,完成对应的case后退出。

Select的内存布局

了解chanel的实现后对select的语法有个疑问,select如何实现多路复用的,为什么没有在第一个channel操作时阻塞 从而导致后面的case都执行不了。为了解决疑问,对应代码看一下汇编调用了哪些runtime层的函数,发现select语法块被编译器翻译成了以下过程。

创建select–>注册case–>执行select–>释放select

select {case c1 <-1: // non-blockingcase <-c2: // non-blockingdefault: // will do this 
}
runtime.newselect
runtime.selectsend
runtime.selectrecv
runtime.selectdefault
runtime.selectgo

select实际上是个hselect结构体,其中注册的case放到scase中。scase保存有当前case操作的hchan。pollorder指向的是乱序后的scase序号。lockorder中将要保存的是每个case对应的hchan的地址。

type hselect struct {tcase     uint16   // total count of scase[]ncase     uint16   // currently filled scase[]pollorder *uint16  // case poll orderlockorder **hchan  // channel lock orderscase     [1]scase // one per case (in order of appearance)
}
type scase struct {elem        unsafe.Pointer // data elementc           *hchan         // chanpc          uintptr        // return pckind        uint16so          uint16 // vararg of selected boolreceivedp   *bool  // pointer to received bool (recv2)releasetime int64
}

select最后是[1]scase表示select中只保存了一个case的空间,说明select只是个头部,select后面保存了所有的scase,这段Scases的大小就是tcase。在go runtime实现中经常看到这种头部+连续内存的方式。

在这里插入图片描述

select的实现

select创建

在newSelect对象时已经知道了case的数目,并已经分配好上述空间。

func selectsize(size uintptr) uintptr {selsize := unsafe.Sizeof(hselect{}) +(size-1)*unsafe.Sizeof(hselect{}.scase[0]) +size*unsafe.Sizeof(*hselect{}.lockorder) +size*unsafe.Sizeof(*hselect{}.pollorder)return round(selsize, _Int64Align)
}func newselect(sel *hselect, selsize int64, size int32) {if selsize != int64(selectsize(uintptr(size))) {print("runtime: bad select size ", selsize, ", want ", selectsize(uintptr(size)), "\n")throw("bad select size")}sel.tcase = uint16(size)sel.ncase = 0sel.lockorder = (**hchan)(add(unsafe.Pointer(&sel.scase), uintptr(size)*unsafe.Sizeof(hselect{}.scase[0])))sel.pollorder = (*uint16)(add(unsafe.Pointer(sel.lockorder), uintptr(size)*unsafe.Sizeof(*hselect{}.lockorder)))
}

注册case

case channel有三种注册 selectsend selectrecv selectdefault,分别对应着不同的case。他们的注册方式一致,都是ncase+1,然后按照当前的index填充scases域的scase数组的相关字段,主要是用case中的chan和case类型填充c和kind字段。

func selectsendImpl(sel *hselect, c *hchan, pc uintptr, elem unsafe.Pointer, so uintptr) {i := sel.ncasesel.ncase = i + 1cas := (*scase)(add(unsafe.Pointer(&sel.scase), uintptr(i)*unsafe.Sizeof(sel.scase[0])))cas.pc = pccas.c = ccas.so = uint16(so)cas.kind = caseSendcas.elem = elem
}

select执行

pollorder保存的是scase的序号,乱序是为了之后执行时的随机性。

lockorder保存了所有case中channel的地址,这里按照地址大小堆排了一下lockorder对应的这片连续内存。对chan排序是为了去重,保证之后对所有channel上锁时不会重复上锁。

select语句执行时会对整个chanel加锁

select语句会创建select对象 如果放在for循环中长期执行可能会频繁的分配内存

select执行过程总结如下:

  • 通过pollorder的序号,遍历scase找出已经准备好的case。如果有就执行普通的chan读写操作。其中准备好的case是指可以不阻塞完成读写chan的case,或者读已经关闭的chan的case。
  • 如果没有准备好的case,则尝试defualt case。
  • 如果以上都没有,则把当前的G封装好挂到scase所有chan的阻塞链表中,按照chan的操作类型挂到sendq或recvq中。
  • 这个G被某个chan唤醒,遍历scase找到目标case,放弃当前G在其他chan中的等待,返回。
func selectgoImpl(sel *hselect) (uintptr, uint16) {// 对pollorder乱序 填充序号// 对lockorder排序 填充scase中对应的hchan// 通过lockorder遍历每个chan上锁sellock(sel)
loop:// 按照pollorder的顺序遍历scase 查看有没有case已经准备好for i := 0; i < int(sel.ncase); i++ {cas = &scases[pollorder[i]]switch cas.kind {case caseRecv:case caseSend:case caseDefault:dfl = cas}}// 如果没有准备好的scase 则尝试执行defautif dfl != nil {selunlock(sel)cas = dflgoto retc}// 如果没有任何可以执行的case 将当前的G挂到所有case对应的chan// 的等待链表sendq或recvq上 等待被唤醒for i := 0; i < int(sel.ncase); i++ {cas = &scases[pollorder[i]]c = cas.csg := acquireSudog()switch cas.kind {case caseRecv:c.recvq.enqueue(sg)case caseSend:c.sendq.enqueue(sg)}}gp.param = nilgopark(selparkcommit, unsafe.Pointer(sel), "select", traceEvGoBlockSelect|futile, 2)// 被唤醒后又上锁!sellock(sel)sg = (*sudog)(gp.param)gp.param = nil// 唤醒了当前G的sudoG是sg 遍历之前保存的sglist链表匹配for i := int(sel.ncase) - 1; i >= 0; i-- {k = &scases[pollorder[i]]if sg == sglist {cas = k} else {// 若不匹配则收回当前G在这个chan中的排队c = k.cif k.kind == caseSend {c.sendq.dequeueSudoG(sglist)} else {c.recvq.dequeueSudoG(sglist)}}sgnext = sglist.waitlinkreleaseSudog(sglist)sglist = sgnext}selunlock(sel)goto retc
retc:return cas.pc, cas.so
}

原文地址:Go Select的实现

这篇关于Go Select的实现的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1148306

相关文章

使用Python和OpenCV库实现实时颜色识别系统

《使用Python和OpenCV库实现实时颜色识别系统》:本文主要介绍使用Python和OpenCV库实现的实时颜色识别系统,这个系统能够通过摄像头捕捉视频流,并在视频中指定区域内识别主要颜色(红... 目录一、引言二、系统概述三、代码解析1. 导入库2. 颜色识别函数3. 主程序循环四、HSV色彩空间详解

PostgreSQL中MVCC 机制的实现

《PostgreSQL中MVCC机制的实现》本文主要介绍了PostgreSQL中MVCC机制的实现,通过多版本数据存储、快照隔离和事务ID管理实现高并发读写,具有一定的参考价值,感兴趣的可以了解一下... 目录一 MVCC 基本原理python1.1 MVCC 核心概念1.2 与传统锁机制对比二 Postg

SpringBoot整合Flowable实现工作流的详细流程

《SpringBoot整合Flowable实现工作流的详细流程》Flowable是一个使用Java编写的轻量级业务流程引擎,Flowable流程引擎可用于部署BPMN2.0流程定义,创建这些流程定义的... 目录1、流程引擎介绍2、创建项目3、画流程图4、开发接口4.1 Java 类梳理4.2 查看流程图4

C++中零拷贝的多种实现方式

《C++中零拷贝的多种实现方式》本文主要介绍了C++中零拷贝的实现示例,旨在在减少数据在内存中的不必要复制,从而提高程序性能、降低内存使用并减少CPU消耗,零拷贝技术通过多种方式实现,下面就来了解一下... 目录一、C++中零拷贝技术的核心概念二、std::string_view 简介三、std::stri

C++高效内存池实现减少动态分配开销的解决方案

《C++高效内存池实现减少动态分配开销的解决方案》C++动态内存分配存在系统调用开销、碎片化和锁竞争等性能问题,内存池通过预分配、分块管理和缓存复用解决这些问题,下面就来了解一下... 目录一、C++内存分配的性能挑战二、内存池技术的核心原理三、主流内存池实现:TCMalloc与Jemalloc1. TCM

OpenCV实现实时颜色检测的示例

《OpenCV实现实时颜色检测的示例》本文主要介绍了OpenCV实现实时颜色检测的示例,通过HSV色彩空间转换和色调范围判断实现红黄绿蓝颜色检测,包含视频捕捉、区域标记、颜色分析等功能,具有一定的参考... 目录一、引言二、系统概述三、代码解析1. 导入库2. 颜色识别函数3. 主程序循环四、HSV色彩空间

Python实现精准提取 PDF中的文本,表格与图片

《Python实现精准提取PDF中的文本,表格与图片》在实际的系统开发中,处理PDF文件不仅限于读取整页文本,还有提取文档中的表格数据,图片或特定区域的内容,下面我们来看看如何使用Python实... 目录安装 python 库提取 PDF 文本内容:获取整页文本与指定区域内容获取页面上的所有文本内容获取

基于Python实现一个Windows Tree命令工具

《基于Python实现一个WindowsTree命令工具》今天想要在Windows平台的CMD命令终端窗口中使用像Linux下的tree命令,打印一下目录结构层级树,然而还真有tree命令,但是发现... 目录引言实现代码使用说明可用选项示例用法功能特点添加到环境变量方法一:创建批处理文件并添加到PATH1

Java使用HttpClient实现图片下载与本地保存功能

《Java使用HttpClient实现图片下载与本地保存功能》在当今数字化时代,网络资源的获取与处理已成为软件开发中的常见需求,其中,图片作为网络上最常见的资源之一,其下载与保存功能在许多应用场景中都... 目录引言一、Apache HttpClient简介二、技术栈与环境准备三、实现图片下载与保存功能1.

canal实现mysql数据同步的详细过程

《canal实现mysql数据同步的详细过程》:本文主要介绍canal实现mysql数据同步的详细过程,本文通过实例图文相结合给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的... 目录1、canal下载2、mysql同步用户创建和授权3、canal admin安装和启动4、canal