深入理解 GC 原理、调度与调优

2024-08-26 17:04

本文主要是介绍深入理解 GC 原理、调度与调优,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1. 内存管理

        操作系统将虚拟内存分隔为虚拟页(大小为 4KB),当进程向操作系统申请内存时,操作系统通常以页为单位分配内存。即使进程申请 3KB 内存,操作系统也会分配一个 4KB 虚拟页给进程。而程序开发时申请的内存往往都比较小,甚至只有几个字节,总不能也分配一个 4KB 虚拟页吧。

1.1 如何设计动态内存分配器

        Go 语言自己实现的内存分配器一次向操作系统申请一块大内存(如64MB)。当 Go 程序申请内存时,只需要向 Go 语言内存分配器申请即可。那么该如何设计内存分配器呢?

        因为内存分配与释放的时机、大小等完全是随机的,所以随着内存的分配与释放,最初的整块大内存将会被 “分割” 为若干个小块内存。有些小块内存处于已分配状态,有些小块内存处于空闲状态。也就是说,需要额外的内存空间来维护这些信息(内存块的大小以及状态)。如何维护这些信息呢?

        第一种思路是,当程序申请内存时,多分配几个字节用于维护内存块状态以及内存块大小。

        第二种思路是,单独维护一份二进制数据,使用 1 比特存储每一个 8 字节内存的分配状态,其中 1 表示内存已分配,0 表示内存空闲。内存分配情况示意图如下所示:

1.2 Go 语言内存分配器

        Go 语言内存分配的基本单元是 mspan,每一个 mspan 维护着若干个页内存,当 Go 程序申请内存时,底层实际上是从 mspan 中查找分配的。结构体 mspan 的定义如下所示:

type mspan struct {//页数, Go 语言定义页大小为 8KBnpage    uintprt//用于记录内存分配状态的位allocBits *gcBits//表示该 mspan 负责分配的内存大小elemsize    uintprt
}

结构体 mspan 的字段含义如下:

1)npages : 表示该 mspan 管理了多少页内存,Go 语言定义的页大小为 8 KB。

2)allocBits: 该字段用于维护当前 mspan 所有内存的分配状态,Go 语言使用一个比特记录每一个8 字节内存的分配状态,0 表示空闲状态,1 表示已分配状态。

3)elemsize: 为 提升空闲内存的查找效率,Go 语言将 mspan 分为了多种类型,第一种类型的 mspan 仅用于分配固定大小的内存块,该字段表示当前 mspan 负责分配的内存块大小。

Go 语言总共定义了 67 种类型的 mspan,如下所示:

1.3 Go 语言内存管理

Go 语言内存管理还是比较复杂的,以申请内存为例,整个流程涉及多个对象,并且这些对象相互依赖,

1.4 内存逃逸

        一般函数内声明的局部变量应该存储在栈内存中,并且随着函数的调用和返回,该局部变量也会同步分配和释放。然而,Go 语言稍有不同,因为 Go 语言存在内存逃逸情况,在某些情况下,局部变量也有可能存储在堆内存中。

         为什么会有内存逃逸呢?举个例子,某个函数内部声明了一个局部变量,但是该函数返回了局部变量的地址。这种语法在其他语言,比如 C 语言,是不允许的,因为函数返回后,该局部变量的地址也会被释放。但是 Go 语言允许这种语法,只是这时候 Go 语言会将该局部变量存储在堆内存中,即该局部变量逃逸到了堆内存,如下所示:

package main
import "fmt"
func main(){ret := test()fmt.Println(ret)
}func test() *int{var num = 10return &num
}

        那还有哪些情况会引起内存逃逸呢?如果将一个局部变量的地址赋值给全局散列表或者切片,该局部变量也会逃逸到堆内存。再者,如果一个局部变量需要占用大量内存,这时候存储在栈内存是不是也就不太合适了,毕竟 Go 语言协程栈默认只有 2KB。

        那平时开发 Go 程序时,需要关注内存逃逸情况吗?一般来说是不需要的,只是需要清楚一点:逃逸到堆内存上的变量如果不再使用,将会被垃圾回收功能自动回收。

这篇关于深入理解 GC 原理、调度与调优的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1109163

相关文章

怎样通过分析GC日志来定位Java进程的内存问题

《怎样通过分析GC日志来定位Java进程的内存问题》:本文主要介绍怎样通过分析GC日志来定位Java进程的内存问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、GC 日志基础配置1. 启用详细 GC 日志2. 不同收集器的日志格式二、关键指标与分析维度1.

解读GC日志中的各项指标用法

《解读GC日志中的各项指标用法》:本文主要介绍GC日志中的各项指标用法,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、基础 GC 日志格式(以 G1 为例)1. Minor GC 日志2. Full GC 日志二、关键指标解析1. GC 类型与触发原因2. 堆

从原理到实战深入理解Java 断言assert

《从原理到实战深入理解Java断言assert》本文深入解析Java断言机制,涵盖语法、工作原理、启用方式及与异常的区别,推荐用于开发阶段的条件检查与状态验证,并强调生产环境应使用参数验证工具类替代... 目录深入理解 Java 断言(assert):从原理到实战引言:为什么需要断言?一、断言基础1.1 语

MySQL中的表连接原理分析

《MySQL中的表连接原理分析》:本文主要介绍MySQL中的表连接原理分析,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录1、背景2、环境3、表连接原理【1】驱动表和被驱动表【2】内连接【3】外连接【4编程】嵌套循环连接【5】join buffer4、总结1、背景

深度解析Spring AOP @Aspect 原理、实战与最佳实践教程

《深度解析SpringAOP@Aspect原理、实战与最佳实践教程》文章系统讲解了SpringAOP核心概念、实现方式及原理,涵盖横切关注点分离、代理机制(JDK/CGLIB)、切入点类型、性能... 目录1. @ASPect 核心概念1.1 AOP 编程范式1.2 @Aspect 关键特性2. 完整代码实

Java Stream的distinct去重原理分析

《JavaStream的distinct去重原理分析》Javastream中的distinct方法用于去除流中的重复元素,它返回一个包含过滤后唯一元素的新流,该方法会根据元素的hashcode和eq... 目录一、distinct 的基础用法与核心特性二、distinct 的底层实现原理1. 顺序流中的去重

Spring @Scheduled注解及工作原理

《Spring@Scheduled注解及工作原理》Spring的@Scheduled注解用于标记定时任务,无需额外库,需配置@EnableScheduling,设置fixedRate、fixedDe... 目录1.@Scheduled注解定义2.配置 @Scheduled2.1 开启定时任务支持2.2 创建

Spring Boot 实现 IP 限流的原理、实践与利弊解析

《SpringBoot实现IP限流的原理、实践与利弊解析》在SpringBoot中实现IP限流是一种简单而有效的方式来保障系统的稳定性和可用性,本文给大家介绍SpringBoot实现IP限... 目录一、引言二、IP 限流原理2.1 令牌桶算法2.2 漏桶算法三、使用场景3.1 防止恶意攻击3.2 控制资源

一文深入详解Python的secrets模块

《一文深入详解Python的secrets模块》在构建涉及用户身份认证、权限管理、加密通信等系统时,开发者最不能忽视的一个问题就是“安全性”,Python在3.6版本中引入了专门面向安全用途的secr... 目录引言一、背景与动机:为什么需要 secrets 模块?二、secrets 模块的核心功能1. 基

Python中使用uv创建环境及原理举例详解

《Python中使用uv创建环境及原理举例详解》uv是Astral团队开发的高性能Python工具,整合包管理、虚拟环境、Python版本控制等功能,:本文主要介绍Python中使用uv创建环境及... 目录一、uv工具简介核心特点:二、安装uv1. 通过pip安装2. 通过脚本安装验证安装:配置镜像源(可