Linux内核有什么之内存管理子系统有什么第二回 —— 单刀直入

2023-11-08 16:01

本文主要是介绍Linux内核有什么之内存管理子系统有什么第二回 —— 单刀直入,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

接前一篇文章:Linux内核有什么之内存管理子系统有什么第一回 —— 引言

一、单刀直入 —— 一切从malloc开始

想必大家都使用过malloc(),malloc的全称是memory allocation,中文叫做动态内存分配。其用于申请一块连续的指定大小的内存块区域以void *类型返回分配的内存区域地址。

一般的工程师尤其是上层应用工程师知道怎么用这个函数就可以了,如果再能知道它是从堆(heap)中分配,并且能够注意通过free()释放内存从而避免内存泄漏,就算是比较优秀的工程师了。但那是对于应用工程师而言的,对于底层内核工程师,要求远不止于此。我们要知道malloc()的底层机制,具体是怎样由上到下、由应用到内核的,在内核中都做了哪些工作,最终又是如何返回给应用的。

先来看一下malloc的定义。在Linux终端下通过man malloc查看其说明,如下所示:

名称

malloc

原型

#include <stdlib.h>

void *malloc(size_t size);

说明

malloc()函数分配size个字节,并返回一个指向已分配内存的指针。此分配到的内存并未初始化。如果大小为0,那么malloc()返回NULL,或者返回一个唯一的指针值,该值稍后可以成功传递给free()。

返回值

malloc()函数返回一个指向已分配内存的指针,该指针适合任何内置类型。出现错误时,这些函数返回NULL。成功调用malloc()且大小为零,也可能返回NULL。

默认情况下,Linux遵循乐观的内存分配策略。这意味着当mallo()返回非NULL时,不能保证内存真的可用。如果系统内存不足,一个或多个进程将被OOM杀手杀死。有关更多信息,请参阅proc(5)中/proc/sys/vm/overcommit_memory和/proc/sys/vm/oom_adj的描述,以及Linux内核源文件Documentation/vm/overcommit-accounting.rst。

通常,malloc()从堆中分配内存,并根据需要使用sbrk(2)调整堆的大小;当分配大于MMAP_THRESHOLD字节的内存块时,glibc malloc()实现使用mmap(2)将内存分配为私有匿名映射。MMAP_THRESHOLD默认为128kB,但可以使用mallopt(3)进行调整。

在Linux内核4.7之前,使用mmap(2)执行的分配不受RLIMIT_DATA资源限制的影响;自Linux内核 4.7以来,对于使用mmap(2)执行的分配,也强制执行了此限制。

为了避免多线程应用程序中的损坏,在内部使用互斥锁来保护这些函数所使用的内存管理数据结构。在线程同时分配和释放内存的多线程应用程序中,可能存在对这些互斥对象的争用。为了在多线程应用程序中可伸缩地处理内存分配,如果检测到互斥争用,glibc会创建额外的内存分配区域。每个arena都是一个大的内存区域,由系统内部分配(使用brk(2)或mmap(2)),并使用自己的互斥对象进行管理。

从上边man中对于malloc()的说明可以看到,通过malloc()申请一个堆内的空间,底层要么执行brk,要么执行mmap。

brk是一个系统调用,其入口函数是sys_brk;mmap也是一个系统调用,其入口是sys_mmap。

下一回开始对于这两个系统调用进行深入解析。

这篇关于Linux内核有什么之内存管理子系统有什么第二回 —— 单刀直入的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/370955

相关文章

基于Linux的ffmpeg python的关键帧抽取

《基于Linux的ffmpegpython的关键帧抽取》本文主要介绍了基于Linux的ffmpegpython的关键帧抽取,实现以按帧或时间间隔抽取关键帧,文中通过示例代码介绍的非常详细,对大家的学... 目录1.FFmpeg的环境配置1) 创建一个虚拟环境envjavascript2) ffmpeg-py

C++高效内存池实现减少动态分配开销的解决方案

《C++高效内存池实现减少动态分配开销的解决方案》C++动态内存分配存在系统调用开销、碎片化和锁竞争等性能问题,内存池通过预分配、分块管理和缓存复用解决这些问题,下面就来了解一下... 目录一、C++内存分配的性能挑战二、内存池技术的核心原理三、主流内存池实现:TCMalloc与Jemalloc1. TCM

Linux脚本(shell)的使用方式

《Linux脚本(shell)的使用方式》:本文主要介绍Linux脚本(shell)的使用方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录概述语法详解数学运算表达式Shell变量变量分类环境变量Shell内部变量自定义变量:定义、赋值自定义变量:引用、修改、删

Redis过期删除机制与内存淘汰策略的解析指南

《Redis过期删除机制与内存淘汰策略的解析指南》在使用Redis构建缓存系统时,很多开发者只设置了EXPIRE但却忽略了背后Redis的过期删除机制与内存淘汰策略,下面小编就来和大家详细介绍一下... 目录1、简述2、Redis http://www.chinasem.cn的过期删除策略(Key Expir

Linux链表操作方式

《Linux链表操作方式》:本文主要介绍Linux链表操作方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、链表基础概念与内核链表优势二、内核链表结构与宏解析三、内核链表的优点四、用户态链表示例五、双向循环链表在内核中的实现优势六、典型应用场景七、调试技巧与

详解Linux中常见环境变量的特点与设置

《详解Linux中常见环境变量的特点与设置》环境变量是操作系统和用户设置的一些动态键值对,为运行的程序提供配置信息,理解环境变量对于系统管理、软件开发都很重要,下面小编就为大家详细介绍一下吧... 目录前言一、环境变量的概念二、常见的环境变量三、环境变量特点及其相关指令3.1 环境变量的全局性3.2、环境变

Linux系统中的firewall-offline-cmd详解(收藏版)

《Linux系统中的firewall-offline-cmd详解(收藏版)》firewall-offline-cmd是firewalld的一个命令行工具,专门设计用于在没有运行firewalld服务的... 目录主要用途基本语法选项1. 状态管理2. 区域管理3. 服务管理4. 端口管理5. ICMP 阻断

Linux实现线程同步的多种方式汇总

《Linux实现线程同步的多种方式汇总》本文详细介绍了Linux下线程同步的多种方法,包括互斥锁、自旋锁、信号量以及它们的使用示例,通过这些同步机制,可以解决线程安全问题,防止资源竞争导致的错误,示例... 目录什么是线程同步?一、互斥锁(单人洗手间规则)适用场景:特点:二、条件变量(咖啡厅取餐系统)工作流

Linux中修改Apache HTTP Server(httpd)默认端口的完整指南

《Linux中修改ApacheHTTPServer(httpd)默认端口的完整指南》ApacheHTTPServer(简称httpd)是Linux系统中最常用的Web服务器之一,本文将详细介绍如何... 目录一、修改 httpd 默认端口的步骤1. 查找 httpd 配置文件路径2. 编辑配置文件3. 保存

Linux使用scp进行远程目录文件复制的详细步骤和示例

《Linux使用scp进行远程目录文件复制的详细步骤和示例》在Linux系统中,scp(安全复制协议)是一个使用SSH(安全外壳协议)进行文件和目录安全传输的命令,它允许在远程主机之间复制文件和目录,... 目录1. 什么是scp?2. 语法3. 示例示例 1: 复制本地目录到远程主机示例 2: 复制远程主