Python如何使用__slots__实现节省内存和性能优化

2025-04-01 02:50

本文主要是介绍Python如何使用__slots__实现节省内存和性能优化,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

《Python如何使用__slots__实现节省内存和性能优化》你有想过,一个小小的__slots__能让你的Python类内存消耗直接减半吗,没错,今天咱们要聊的就是这个让人眼前一亮的技巧,感兴趣的...

你有想过,一个小小的 __slots__ 能让你的 python 类内存消耗直接减半吗?没错,今天咱们要聊的就是这个让人眼前一亮的技巧,能让你在开发时既节省内存,又能提升性能,简直是程序员心中的“梦中情人”啊!

背景:内存吃得满满的类

你们有没有遇到过这种情况?在某个功能开发时,明明就用了一两个小类,但随着项目的逐步复杂,内存消耗就逐渐变得高得令人发指,简直要撑破你电脑的胃——就像我上次搞的那个爬虫项目,差点没把整个服务器吃掉。原来我们在定义类时,Python 会默认给每个实例分配一个字典,用来存储属性。这也就意味着,每个实例在内存中占据的空间会比你想象的要大。嗯,你没听错,这个“字典”本来是为灵活性设计的,但在一些内存敏感的场景下,这个“特性”就会变成内存吃货。

举个例子:你觉得 Python 类内存占用不大?

假设你有个简单的类:

class Person:
    def __init__(self, name, age):
        self.name = name
        self.age = age

这个类看起来挺简单,但其实它每个实例都会多占用一些内存,因为 Python 默认会为 Person 类的每个实例编程创建一个字典,来存储 nameage。这样,每当你创建一个 Person 实例时,就会有一个额外的内存开销,哪怕你只用了两个属性。

p1 = Person("小李", 25)
p2 = Person("小周", 28)

到这儿,你可能会觉得:“哦,反正我电脑内存够大,没啥问题。” 可是等到你写了几十上百个类实例,内存开销直接炸裂,程序运行速度变慢不说,服务器的性能也可能受到影响。

__slots__:你的内存管理小助手

说到这里,你可能会想:“有啥办法能省点内存吗?” 好的,给你推荐个神器——__slots__

__slots__ 是 Python 提供的一个魔法,让你在定义类时限制它的属性存储方式,减少内存开销。通过使用 __slots__,你可以告诉 Python 类不要使用字典来存储实例属性,而是直接在内存中为每个属性分配固定的空间。

  • ​内存结构对比:

    • ​无 slots:实例内存 = 对象头 + dict 指针 + 其他元数据。
    • ​有 slots:实例内存 = 对象头 + 属性值数组 + 其他元数据。
  • 举个生活例子:

    • 假设你是一个班主任,班里每个学生(实例)都有一个书包(__dict__)。书包里可以随便装东西(属性),比如课本、水杯、零食…… 虽然灵活,但每个书包本身就有重量(内存占用),尤其当你有 1000 个学生时,1000 个书包占满教室!

    • 而用了 __slots__,相当于你规定:每个学生只能带一个固定的小袋子,里面只能放指定的几样东西(比如只带课本和笔)www.chinasem.cn袋子更轻便,不占地方,1000 个学生就能省出一大块空间!

__slots__怎么用

这样修改一下你的类

class Person:
    __slots__ = ['name', 'age']
    
    def __init__(self, name, age):
        self.name = name
        self.age = age

通过上面这个小改动,你就告诉 Python:“嘿!只允许 nameage 这两个属性!” 结果呢,Python 就会在内存中为这两个属性分配固定的空间,不再使用字典,这样内存占用就能大大减少。

举个大概的例子:看看效果如何?

1. 先举个简单的例子看看效果

from pympler import asizeof

class WithoutSlots:
    def __init__(self):
        self.a = 1
        self.b = 2
        self.c = 3

class WithSlots:
    __slots__ = ['a', 'b', 'c']
    def __init__(self):
        self.a = 1
        self.b = 2
        self.c = 3

obj_big = WithoutSlots()
obj2_small = WithSlots()

print(asizeof.asizeof(obj_big))  # 输出约 416 字节
print(asizeof.asizeof(obj2_small))  # 输出约 152 字节

提示: pympler 是一个 Python 库,用于分析和测量 Python 对象的内存使用情况。通过pip install pympler安装

2. 模拟创建百万级实例观察内存总量

obj_big = [WithoutSlots() for _ in range(1_000_000)]  
obj2_small = [WithSlots() for _ in range(1_000_000)]  

print(asizeof.asizeof(obj_big))  # 输出约 160448992 字节
print(asizeof.asizeof(obj2_small))  # 输出约 64448824 字节

使用__slots__时需要注意的几点

好了,效果虽然看起来很棒,但 __slots__ 也不是万能的,咱们得谨慎使用。这里有几点需要注意:

1.不可动态添加属性

使用 __slots__ 后,你不能再给实编程例动态添加其他属性。也就是说,如果你后面再想加个属性,得提前在 __slots__ 中定义好。

p = Person("小李", 25)
p.name = "小李"  # 可以
p.address = "北京"  # 报错:AttributeError: 'Person' object has no attribute 'address'

2.不能继承自有 __slots__ 的类

如果你想从一个有 __slots__ 的类继承,子类也必须定义自己的 __slots__,否则会引发错误。

class Student(Person):
    __slots__ = ['school']

s = Student("小张", 22)
s.school = "清华"

3.对小类特别有用

__slots__ 的效果最显著的地方是在对象比较多、内存使用量较大的情况下。如果你的类实例很少或者内存压力不大,那其实使用 __slots__ 的意义就不大。

总结:有心就行

这次关于 __slots__ 的分享其实就是提醒大家,如果你做的项目是内存要求比较高,或者需要频繁创建大量实例的时候,别忘了给类加个 __slots__cbuzO它能帮你节省大量内存开销。

当然,Python 的内存管理有很多值得玩味的地方,但 __slots__ 绝对是一个不容忽视的好工具。学会了这个小技巧,不仅能让你的代码更加高效,还能让你的程序更“瘦”,说不定某天就帮你“瘦”到系统能跑得更快,哪怕是爬虫,也能更加轻盈哦!

你可能会觉得,“花姐,这个真的能大幅提升性能吗?” 答案是:**能!**但还是要看场景。用对了地方,能帮你节省大量内存,提升性能;用错了地方,就会增加额外的复杂度。所以,千万别瞎用!记住,优化要有针对性,别为了优化而优化。

到此这篇关于Python如何使用__slots__实现节省内存和性能优化的文章就介绍到这了,更多相关Python __slots__内容请搜索China编程(www.chinasem.cn)以前的文章或继续浏览下面的相关文章希望大家以后多多支持编程China编程(www.chinasem.cn)!cbuzO

这篇关于Python如何使用__slots__实现节省内存和性能优化的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1154037

相关文章

一文全面详解Python变量作用域

《一文全面详解Python变量作用域》变量作用域是Python中非常重要的概念,它决定了在哪里可以访问变量,下面我将用通俗易懂的方式,结合代码示例和图表,带你全面了解Python变量作用域,需要的朋友... 目录一、什么是变量作用域?二、python的四种作用域作用域查找顺序图示三、各作用域详解1. 局部作

Python主动抛出异常的各种用法和场景分析

《Python主动抛出异常的各种用法和场景分析》在Python中,我们不仅可以捕获和处理异常,还可以主动抛出异常,也就是以类的方式自定义错误的类型和提示信息,这在编程中非常有用,下面我将详细解释主动抛... 目录一、为什么要主动抛出异常?二、基本语法:raise关键字基本示例三、raise的多种用法1. 抛

Python基于微信OCR引擎实现高效图片文字识别

《Python基于微信OCR引擎实现高效图片文字识别》这篇文章主要为大家详细介绍了一款基于微信OCR引擎的图片文字识别桌面应用开发全过程,可以实现从图片拖拽识别到文字提取,感兴趣的小伙伴可以跟随小编一... 目录一、项目概述1.1 开发背景1.2 技术选型1.3 核心优势二、功能详解2.1 核心功能模块2.

MYSQL查询结果实现发送给客户端

《MYSQL查询结果实现发送给客户端》:本文主要介绍MYSQL查询结果实现发送给客户端方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录mysql取数据和发数据的流程(边读边发)Sending to clientSending DataLRU(Least Rec

MySQL分区表的具体使用

《MySQL分区表的具体使用》MySQL分区表通过规则将数据分至不同物理存储,提升管理与查询效率,本文主要介绍了MySQL分区表的具体使用,具有一定的参考价值,感兴趣的可以了解一下... 目录一、分区的类型1. Range partition(范围分区)2. List partition(列表分区)3. H

Java中实现线程的创建和启动的方法

《Java中实现线程的创建和启动的方法》在Java中,实现线程的创建和启动是两个不同但紧密相关的概念,理解为什么要启动线程(调用start()方法)而非直接调用run()方法,是掌握多线程编程的关键,... 目录1. 线程的生命周期2. start() vs run() 的本质区别3. 为什么必须通过 st

使用SpringBoot整合Sharding Sphere实现数据脱敏的示例

《使用SpringBoot整合ShardingSphere实现数据脱敏的示例》ApacheShardingSphere数据脱敏模块,通过SQL拦截与改写实现敏感信息加密存储,解决手动处理繁琐及系统改... 目录痛点一:痛点二:脱敏配置Quick Start——Spring 显示配置:1.引入依赖2.创建脱敏

Redis过期删除机制与内存淘汰策略的解析指南

《Redis过期删除机制与内存淘汰策略的解析指南》在使用Redis构建缓存系统时,很多开发者只设置了EXPIRE但却忽略了背后Redis的过期删除机制与内存淘汰策略,下面小编就来和大家详细介绍一下... 目录1、简述2、Redis http://www.chinasem.cn的过期删除策略(Key Expir

基于Python实现一个简单的题库与在线考试系统

《基于Python实现一个简单的题库与在线考试系统》在当今信息化教育时代,在线学习与考试系统已成为教育技术领域的重要组成部分,本文就来介绍一下如何使用Python和PyQt5框架开发一个名为白泽题库系... 目录概述功能特点界面展示系统架构设计类结构图Excel题库填写格式模板题库题目填写格式表核心数据结构

Python使用smtplib库开发一个邮件自动发送工具

《Python使用smtplib库开发一个邮件自动发送工具》在现代软件开发中,自动化邮件发送是一个非常实用的功能,无论是系统通知、营销邮件、还是日常工作报告,Python的smtplib库都能帮助我们... 目录代码实现与知识点解析1. 导入必要的库2. 配置邮件服务器参数3. 创建邮件发送类4. 实现邮件