构建高效的数据存储系统:Python dbm 模块的应用与实践

news2024/12/25 0:48:01

🍀 前言

博客地址:

  • CSDN:https://blog.csdn.net/powerbiubiu

👋 简介

dbm(Database Manager)是Python中的一个模块,用于创建和管理简单的键值对数据库。它提供了一种简单而有效的方式来存储和检索数据,特别适用于小型应用程序或需要快速访问数据的场景。

📖 正文

1 dbm的介绍

1.1 方法介绍
  • open(filename[, flag[, mode]]):打开或创建一个数据库文件;
    • filename:文件名
    • flag:参数可以是'r'(打开一个存在的文件,默认值)、'w'(打开文件对其读/写,如果文件不存在,则不会创建它)、'c'(打开文件对其进行读/写,如果不存在则创建该文件)、'n'(总是创建一个新的空白文件用于读/写);
    • mode:参数的 Unix 模式,八进制默认设置为 0o666,仅在创建新数据库时使用;
  • keys():返回数据库中所有的键;
  • values():返回数据库中所有的值;
  • get(key, default=None):根据键获取对应的值,若不存在则返回None;
  • clear():清空数据库;
  • close():关闭数据库。
1.2 特点介绍
  • 简单易用:dbm 模块提供了一种简单而直观的方式来创建和管理键值对数据库,适用于小型应用程序或需要快速访问数据的场景。
  • 多种支持:dbm 模块支持多种不同类型的数据库,如 GNU dbm、Berkeley DB、OpenBSD db、QDBM 等,这使得可以方便地切换和使用不同的数据库。
  • 键值存储:通过 dbm 模块,可以使用字符串作为键和值来存储数据,类似于字典的方式。这使得可以快速检索和访问对应的值。
  • 灵活的操作方法:dbm 模块提供了一系列灵活且便捷的操作方法,如打开/关闭数据库、获取所有键或值、根据键获取对应的值、更新数据库等,方便进行数据存储和检索操作。
  • 跨平台支持:dbm 模块在不同的操作系统上都有良好的支持,因此可以在多个平台上使用。

2 dbm的使用

2.1 数据写入
import dbm

data = {
    'sno': '201215001',
    'name': '张三',
    'age': 20,
    'hobby': ['足球', '篮球'],
    '学校': 'xx大学'
}

f = dbm.open('student', 'c')
for k, v in data.items():
    f[k] = str(v)

f.close()

数据写入成功后,会在同级目录中生成三个文件
image.png

2.2 数据读取

数据读取的时候,如果有中文,则需要使用decode()对字符串进行转码,即可显示正常的中文信息。

import dbm

f = dbm.open('student')
for k in f:
    value = f[k].decode()
    print(f'{k.decode()}==>{value}==>{type(value)}')

# sno==>201215001==><class 'str'>
# name==>张三==><class 'str'>
# age==>20==><class 'str'>
# hobby==>['足球', '篮球']==><class 'str'>
# 学校==>xx大学==><class 'str'>

通过type()可以发现,读取出的数据,类型都是字符串,而在数据存储的时候,不仅有字符串,还有数字和列表,我们可以通过对应的方法,如果listintjson等方式,可以将获取到的字符串进行类型转换。

2.3 键值获取
f = dbm.open('student')
print(f.keys())
print(f.values())
print([i.decode() for i in f.values()])

# [b'sno', b'name', b'age', b'hobby', b'\xe5\xad\xa6\xe6\xa0\xa1']
# ValuesView(<dbm.dumb._Database object at 0x000001F6A0FFFB80>)
# ['201215001', '张三', '20', "['足球', '篮球']", 'xx大学']

key()返回的列表中,元素都是byte类型,而values()返回的内存地址,通过列表推导式可以获得值的内容。

3 工具类封装

import dbm
import re
from typing import Union, Any

class DBMUtils:

    def __init__(self, filename: str) -> None:
        self.filename = filename

    def __dbm_write(self, filename: str, data: dict) -> None:
        """
        数据持久化
        :param filename: 文件名
        :param data: 数据
        :return:
        """
        with dbm.open(filename, 'c') as f:
            for k, v in data.items():
                f[k] = str(v)

    def __type_conversion(self, content: str) -> Any:
        """
        对读取的字符串数据进行正则匹配,将字符串类型的字典,列表,数字,布尔转换成对应类型
        :param content: 字符串内容
        :return:
        """
        pattern = r'\{.*\}$|\[.*\]$|\(.*\)$|^[-+]?[0-9]*\.?[0-9]+$|true|false'
        if re.match(pattern, content, re.I):
            return eval(content)
        else:
            return content

    def write(self, data: Union[dict, list]) -> None:
        """
        写入json数据
        :param data: 数据
        :return:
        """
        if isinstance(data, dict):
            self.__dbm_write(self.filename, data)
        elif isinstance(data, list):
            for item in data:
                filename = f'{self.filename}{data.index(item)}'
                self.__dbm_write(filename, item)
        else:
            raise TypeError('data must be dict or list')

    def read(self, key: str = None, *, flag: bool = False) -> Any:
        """
        通过键获取值
        :param key: 键,默认值为None,则获取所有数据,否则通过键获取值
        :param flag: 是否将字符串类型的字典,列表,数字,布尔转换成对应类型,默认False
        :return:
        """
        if key:
            with dbm.open(self.filename) as f:
                try:
                    if flag:
                        return self.__type_conversion(f[key].decode())
                    else:
                        return f[key].decode()
                except KeyError:
                    return None
        else:
            with dbm.open(self.filename) as f:
                if flag:
                    return {k.decode(): self.__type_conversion(v.decode()) for k, v in f.items()}
                else:
                    return {k.decode(): v.decode() for k, v in f.items()}
2.1 写入数据

写入数据的方法write(data)支持传入字典,或者列表套字典。

if __name__ == '__main__':
    db = DBMUtils('person')
    data = {
        'no': '10001',
        'name': '张三',
        'student': True,
        'age': 20,
        'hobby': ['足球', '篮球'],
        'score': {
            'chinese': 80,
            'math': 90,
            'english': 85
        }
    }

    db.write(data)
2.2 读取数据

读取数据方法read([key[, flag]])支持读取全部内容,或根据键获取对应的值,同时flag参数为True时,会将对应的字符串类型的字典,列表,数字,布尔类型转换成对应的类型。

if __name__ == '__main__':
    db = DBMUtils('person')
	res = db.read('hobby', flag=True)
    print(res)
    print(type(res))

# ['足球', '篮球']
# <class 'list'>

✏ 总结

虽然 dbm 模块提供了简单、轻量级的数据库管理功能,但在并发性能和复杂查询支持方面可能不如其他高级数据库,因此对于大型应用程序或需要复杂查询和事务支持的场景,可能需要考虑其他更强大的数据库解决方案。

💖 欢迎关注我的公众号

在这里插入图片描述

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1810041.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

HTML静态网页成品作业(HTML+CSS)—— 环保主题介绍网页(5个页面)

&#x1f389;不定期分享源码&#xff0c;关注不丢失哦 文章目录 一、作品介绍二、作品演示三、代码目录四、网站代码HTML部分代码 五、源码获取 一、作品介绍 &#x1f3f7;️本套采用HTMLCSS&#xff0c;未使用Javacsript代码&#xff0c;共有5个页面。 二、作品演示 三、代…

hadoop未授权访问命令执行漏洞复现-vulfocus

1 介绍 Hadoop YARN&#xff08;Yet Another Resource Negotiator&#xff09;的ResourceManager是集群资源管理的核心组件&#xff0c;负责分配和管理集群资源以及调度作业。如果ResourceManager出现未授权访问漏洞&#xff0c;可能允许未经认证的用户访问或操作集群资源&…

二叉树顺序结构——堆的结构与实现

二叉树顺序结构——堆的结构与实现 一、二叉树的顺序结构二、堆的概念及结构三、堆的实现堆向下调整算法堆的创建建堆时间复杂度堆的插入(堆向上调整算法)堆的删除堆的代码实现(使用VS2022的C语言)初始化、销毁构建、插入、删除返回堆顶元素、判空、返回有效元素个数 四、完整 …

Python深度学习之PyTorch基础教程

⛄前言 PyTorch是一个基于Torch的Python开源机器学习(深度学习)框架&#xff0c;由Facebook的人工智能研究院开发&#xff0c;不仅能够实现强大的GPU加速&#xff0c;还支持动态神经网络&#xff0c;使得研究人员和开发人员能够轻松构建和训练复杂的深度学习模型。与TensorFlo…

贪心算法 -- 组合一组数字获得最大数

贪心算法 – 组合一组数字获得最大数 文章目录 贪心算法 -- 组合一组数字获得最大数题目重现读懂题目贪心场景代码示例 题目重现 题目链接&#xff1a;最大数 - 力扣 给定一组非负整数 nums&#xff0c;重新排列每个数的顺序&#xff08;每个数不可拆分&#xff09;使之组成一…

error 12154 received logging on to the standby报错处理

错误 处理方法 该参数不是主库的servicename &#xff08;低级错误&#xff09; SQL> alter system set log_archive_dest_2 SERVICEstandby ASYNC VALID_FOR(ONLINE_LOGFILES,PRIMARY_ROLE) DB_UNIQUE_NAMEstandby; System altered. 观察主库日志: 备库日志: 该问题会影…

Python集合的基本概念和使用方法

目录 集合&#xff08;Set&#xff09; 基本概念 基本特性 基本操作 集合运算 成员测试 高级操作 集合推导式 总结 集合&#xff08;Set&#xff09; Python集合&#xff08;Set&#xff09;是Python语言中一个非常实用且强大的数据结构&#xff0c;它用于存储多个不…

day27回溯算法part03| 39. 组合总和 40.组合总和II 131.分割回文串

39. 组合总和 题目链接/文章讲解 | 视频讲解 本题是 集合里元素可以用无数次&#xff0c;那么和组合问题的差别 其实仅在于 startIndex上的控制 class Solution { public:int sum;vector<int> path;vector<vector<int>> result;void backtracking(vector<…

爬虫工具yt-dlp

yt-dlp是youtube-dlp的一个fork&#xff0c;youtube-dlp曾经也较为活跃&#xff0c;但后来被众多网站屏蔽&#xff0c;于是大家转而在其基础上开发yt-dlp。yt-dlp的github项目地址为&#xff1a;GitHub - yt-dlp/yt-dlp: A feature-rich command-line audio/video downloaderA …

Java学习【深入探索包装类和泛型】

Java学习【深入探索包装类和泛型】 &#x1f680;包装类获取包装类对象的方式使用valueOf()创建直接赋值 Integer成员方法 &#x1f680;泛型引出泛型泛型类泛型方法泛型接口泛型的继承和通配符泛型的上界 在Java的学习中&#xff0c;包装类和泛型是两个重要的概念&#xff0c;…

分布式事务AP控制方案(上)

分布式事务控制方案 本篇文章给出一种要求高可用性&#xff08;AP思想&#xff09;的分布式事务控制方案 下篇新鲜出炉&#xff1a;点我查看 分布式事务控制方案1、业务背景2、本地消息表的设计3、对消息表的操作4、任务调度5、任务流程控制的抽象类6、课程发布的实现类7、总…

我的创作纪念日--我和CSDN一起走过的1825天

机缘 第一次在CSDN写文章&#xff0c;是自己在记录学习Java8新特性中Lambda表达式的内容过程中收获的学习心得。之前也有记录工作和生活中的心得体会、难点的解决办法、bug的排查处理过程等等。一直都用的有道笔记&#xff0c;没有去和大家区分享的想法&#xff0c;是一起的朋…

《Brave New Words 》2.4 与历史对话

Part II: Giving Voice to the Social Sciences 第二部分&#xff1a;为社会科学发声 Conversing with History 与历史对话 Good history and civics teachers make the past interesting. Great history and civics teachers make the past come alive. When history and civi…

作业07 递推算法2

作业&#xff1a; #include <iostream> using namespace std; int main(){int a[110][110]{0},b[110][110]{0},n;cin>>n;for(int i1;i<n;i){for(int j1;j<i;j){cin>>a[i][j];}}for(int in-1;i>1;i--){for(int j1;j<i;j){a[i][j]a[i][j]max(a[i1]…

离散数学--连通性和矩阵

目录 0.关系的运算和性质 1.通路和回路 2.连通关系 3.割点&#xff08;边&#xff09;和点&#xff08;边&#xff09;割集 4.强&#xff08;弱&#xff09;连通&单向连通 0.关系的运算和性质 &#xff08;1&#xff09;这个运算包括了矩阵的运算&#xff0c;包括这个…

汽车数据应用构想(三)

上期说的&#xff0c;用数据去拟合停车信息的应用&#xff0c;那么类似的POI信息相关的场景其实都可以实现。今天讲讲用户使用频率也很高的加油/充电场景。 实际应用中&#xff0c;在加油场景中用户关心的通常还是价格。无论是导航还是各种加油APP/小程序&#xff0c;都已经很…

了解常用智能指针

智能指针 1、概念 C中引入智能指针的主要目的是为了解决内存管理的问题&#xff0c;传统的指针&#xff08;裸指针&#xff09;在使用时需要手动分配和释放内存&#xff0c;容易出现内存泄漏和悬挂指针等问题。智能指针通过封装裸指针&#xff0c;并提供自动内存管理功能&…

端午安康,最真挚的祝福送最“粽”要的人

端午节&#xff0c;又称端阳节、龙舟节、重五节、天中节等&#xff0c;是集拜神祭祖、祈福辟邪、欢庆娱乐及饮食为一体的民俗大节&#xff0c;与春节、清明节、中秋节并称为中国四大传统节日&#xff0c;2008年被列为国家法定节假日&#xff0c;2009年9月端午节成为中国首个入选…

笔记 | 软件工程04:软件项目管理

1 软件项目及其特点 1.1 什么是项目 1.2 项目特点 1.3 影响项目成功的因素 1.4 什么是软件项目 针对软件这一特定产品和服务的项目努力开展“软件开发活动",&#xff08;理解&#xff1a;软件项目是一种活动&#xff09; 1.5 软件项目的特点 1.6 军用软件项目的特点 2 …