构建高效的数据存储系统:Python dbm 模块的应用与实践

2024-06-10 19:04

本文主要是介绍构建高效的数据存储系统:Python dbm 模块的应用与实践,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

🍀 前言

博客地址:

  • CSDN:https://blog.csdn.net/powerbiubiu

👋 简介

dbm(Database Manager)是Python中的一个模块,用于创建和管理简单的键值对数据库。它提供了一种简单而有效的方式来存储和检索数据,特别适用于小型应用程序或需要快速访问数据的场景。

📖 正文

1 dbm的介绍

1.1 方法介绍
  • open(filename[, flag[, mode]]):打开或创建一个数据库文件;
    • filename:文件名
    • flag:参数可以是'r'(打开一个存在的文件,默认值)、'w'(打开文件对其读/写,如果文件不存在,则不会创建它)、'c'(打开文件对其进行读/写,如果不存在则创建该文件)、'n'(总是创建一个新的空白文件用于读/写);
    • mode:参数的 Unix 模式,八进制默认设置为 0o666,仅在创建新数据库时使用;
  • keys():返回数据库中所有的键;
  • values():返回数据库中所有的值;
  • get(key, default=None):根据键获取对应的值,若不存在则返回None;
  • clear():清空数据库;
  • close():关闭数据库。
1.2 特点介绍
  • 简单易用:dbm 模块提供了一种简单而直观的方式来创建和管理键值对数据库,适用于小型应用程序或需要快速访问数据的场景。
  • 多种支持:dbm 模块支持多种不同类型的数据库,如 GNU dbm、Berkeley DB、OpenBSD db、QDBM 等,这使得可以方便地切换和使用不同的数据库。
  • 键值存储:通过 dbm 模块,可以使用字符串作为键和值来存储数据,类似于字典的方式。这使得可以快速检索和访问对应的值。
  • 灵活的操作方法:dbm 模块提供了一系列灵活且便捷的操作方法,如打开/关闭数据库、获取所有键或值、根据键获取对应的值、更新数据库等,方便进行数据存储和检索操作。
  • 跨平台支持:dbm 模块在不同的操作系统上都有良好的支持,因此可以在多个平台上使用。

2 dbm的使用

2.1 数据写入
import dbmdata = {'sno': '201215001','name': '张三','age': 20,'hobby': ['足球', '篮球'],'学校': 'xx大学'
}f = dbm.open('student', 'c')
for k, v in data.items():f[k] = str(v)f.close()

数据写入成功后,会在同级目录中生成三个文件
image.png

2.2 数据读取

数据读取的时候,如果有中文,则需要使用decode()对字符串进行转码,即可显示正常的中文信息。

import dbmf = dbm.open('student')
for k in f:value = f[k].decode()print(f'{k.decode()}==>{value}==>{type(value)}')# sno==>201215001==><class 'str'>
# name==>张三==><class 'str'>
# age==>20==><class 'str'>
# hobby==>['足球', '篮球']==><class 'str'>
# 学校==>xx大学==><class 'str'>

通过type()可以发现,读取出的数据,类型都是字符串,而在数据存储的时候,不仅有字符串,还有数字和列表,我们可以通过对应的方法,如果listintjson等方式,可以将获取到的字符串进行类型转换。

2.3 键值获取
f = dbm.open('student')
print(f.keys())
print(f.values())
print([i.decode() for i in f.values()])# [b'sno', b'name', b'age', b'hobby', b'\xe5\xad\xa6\xe6\xa0\xa1']
# ValuesView(<dbm.dumb._Database object at 0x000001F6A0FFFB80>)
# ['201215001', '张三', '20', "['足球', '篮球']", 'xx大学']

key()返回的列表中,元素都是byte类型,而values()返回的内存地址,通过列表推导式可以获得值的内容。

3 工具类封装

import dbm
import re
from typing import Union, Anyclass DBMUtils:def __init__(self, filename: str) -> None:self.filename = filenamedef __dbm_write(self, filename: str, data: dict) -> None:"""数据持久化:param filename: 文件名:param data: 数据:return:"""with dbm.open(filename, 'c') as f:for k, v in data.items():f[k] = str(v)def __type_conversion(self, content: str) -> Any:"""对读取的字符串数据进行正则匹配,将字符串类型的字典,列表,数字,布尔转换成对应类型:param content: 字符串内容:return:"""pattern = r'\{.*\}$|\[.*\]$|\(.*\)$|^[-+]?[0-9]*\.?[0-9]+$|true|false'if re.match(pattern, content, re.I):return eval(content)else:return contentdef write(self, data: Union[dict, list]) -> None:"""写入json数据:param data: 数据:return:"""if isinstance(data, dict):self.__dbm_write(self.filename, data)elif isinstance(data, list):for item in data:filename = f'{self.filename}{data.index(item)}'self.__dbm_write(filename, item)else:raise TypeError('data must be dict or list')def read(self, key: str = None, *, flag: bool = False) -> Any:"""通过键获取值:param key: 键,默认值为None,则获取所有数据,否则通过键获取值:param flag: 是否将字符串类型的字典,列表,数字,布尔转换成对应类型,默认False:return:"""if key:with dbm.open(self.filename) as f:try:if flag:return self.__type_conversion(f[key].decode())else:return f[key].decode()except KeyError:return Noneelse:with dbm.open(self.filename) as f:if flag:return {k.decode(): self.__type_conversion(v.decode()) for k, v in f.items()}else:return {k.decode(): v.decode() for k, v in f.items()}
2.1 写入数据

写入数据的方法write(data)支持传入字典,或者列表套字典。

if __name__ == '__main__':db = DBMUtils('person')data = {'no': '10001','name': '张三','student': True,'age': 20,'hobby': ['足球', '篮球'],'score': {'chinese': 80,'math': 90,'english': 85}}db.write(data)
2.2 读取数据

读取数据方法read([key[, flag]])支持读取全部内容,或根据键获取对应的值,同时flag参数为True时,会将对应的字符串类型的字典,列表,数字,布尔类型转换成对应的类型。

if __name__ == '__main__':db = DBMUtils('person')res = db.read('hobby', flag=True)print(res)print(type(res))# ['足球', '篮球']
# <class 'list'>

✏ 总结

虽然 dbm 模块提供了简单、轻量级的数据库管理功能,但在并发性能和复杂查询支持方面可能不如其他高级数据库,因此对于大型应用程序或需要复杂查询和事务支持的场景,可能需要考虑其他更强大的数据库解决方案。

💖 欢迎关注我的公众号

在这里插入图片描述

这篇关于构建高效的数据存储系统:Python dbm 模块的应用与实践的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1049004

相关文章

JDK21对虚拟线程的几种用法实践指南

《JDK21对虚拟线程的几种用法实践指南》虚拟线程是Java中的一种轻量级线程,由JVM管理,特别适合于I/O密集型任务,:本文主要介绍JDK21对虚拟线程的几种用法,文中通过代码介绍的非常详细,... 目录一、参考官方文档二、什么是虚拟线程三、几种用法1、Thread.ofVirtual().start(

从基础到高级详解Go语言中错误处理的实践指南

《从基础到高级详解Go语言中错误处理的实践指南》Go语言采用了一种独特而明确的错误处理哲学,与其他主流编程语言形成鲜明对比,本文将为大家详细介绍Go语言中错误处理详细方法,希望对大家有所帮助... 目录1 Go 错误处理哲学与核心机制1.1 错误接口设计1.2 错误与异常的区别2 错误创建与检查2.1 基础

Python版本信息获取方法详解与实战

《Python版本信息获取方法详解与实战》在Python开发中,获取Python版本号是调试、兼容性检查和版本控制的重要基础操作,本文详细介绍了如何使用sys和platform模块获取Python的主... 目录1. python版本号获取基础2. 使用sys模块获取版本信息2.1 sys模块概述2.1.1

一文详解Python如何开发游戏

《一文详解Python如何开发游戏》Python是一种非常流行的编程语言,也可以用来开发游戏模组,:本文主要介绍Python如何开发游戏的相关资料,文中通过代码介绍的非常详细,需要的朋友可以参考下... 目录一、python简介二、Python 开发 2D 游戏的优劣势优势缺点三、Python 开发 3D

Python函数作用域与闭包举例深度解析

《Python函数作用域与闭包举例深度解析》Python函数的作用域规则和闭包是编程中的关键概念,它们决定了变量的访问和生命周期,:本文主要介绍Python函数作用域与闭包的相关资料,文中通过代码... 目录1. 基础作用域访问示例1:访问全局变量示例2:访问外层函数变量2. 闭包基础示例3:简单闭包示例4

Python实现字典转字符串的五种方法

《Python实现字典转字符串的五种方法》本文介绍了在Python中如何将字典数据结构转换为字符串格式的多种方法,首先可以通过内置的str()函数进行简单转换;其次利用ison.dumps()函数能够... 目录1、使用json模块的dumps方法:2、使用str方法:3、使用循环和字符串拼接:4、使用字符

Python版本与package版本兼容性检查方法总结

《Python版本与package版本兼容性检查方法总结》:本文主要介绍Python版本与package版本兼容性检查方法的相关资料,文中提供四种检查方法,分别是pip查询、conda管理、PyP... 目录引言为什么会出现兼容性问题方法一:用 pip 官方命令查询可用版本方法二:conda 管理包环境方法

Linux下利用select实现串口数据读取过程

《Linux下利用select实现串口数据读取过程》文章介绍Linux中使用select、poll或epoll实现串口数据读取,通过I/O多路复用机制在数据到达时触发读取,避免持续轮询,示例代码展示设... 目录示例代码(使用select实现)代码解释总结在 linux 系统里,我们可以借助 select、

基于Python开发Windows自动更新控制工具

《基于Python开发Windows自动更新控制工具》在当今数字化时代,操作系统更新已成为计算机维护的重要组成部分,本文介绍一款基于Python和PyQt5的Windows自动更新控制工具,有需要的可... 目录设计原理与技术实现系统架构概述数学建模工具界面完整代码实现技术深度分析多层级控制理论服务层控制注

pycharm跑python项目易出错的问题总结

《pycharm跑python项目易出错的问题总结》:本文主要介绍pycharm跑python项目易出错问题的相关资料,当你在PyCharm中运行Python程序时遇到报错,可以按照以下步骤进行排... 1. 一定不要在pycharm终端里面创建环境安装别人的项目子模块等,有可能出现的问题就是你不报错都安装