使用Python进行数据库连接与操作SQLite和MySQL【第144篇—SQLite和MySQL】

news2024/10/6 2:20:14

👽发现宝藏

前些天发现了一个巨牛的人工智能学习网站，通俗易懂，风趣幽默，忍不住分享一下给大家。【点击进入巨牛的人工智能学习网站】。

使用Python进行数据库连接与操作：SQLite和MySQL

在现代应用程序开发中，与数据库进行交互是至关重要的一环。Python提供了强大的库来连接和操作各种类型的数据库，其中包括SQLite和MySQL。本文将介绍如何使用Python连接这两种数据库，并进行基本的操作，包括创建表、插入数据、查询数据等。

1. 安装必要的库

首先，我们需要安装Python的数据库驱动程序，以便与SQLite和MySQL进行交互。对于SQLite，Python自带了支持；而对于MySQL，我们需要安装额外的库，如mysql-connector-python。

# 安装 MySQL 连接器
pip install mysql-connector-python

2. 连接SQLite数据库

SQLite是一种轻量级的嵌入式数据库，无需服务器即可使用。以下是如何连接并操作SQLite数据库的示例代码：

import sqlite3

# 连接到 SQLite 数据库
conn = sqlite3.connect('example.db')

# 创建一个游标对象
cursor = conn.cursor()

# 创建表
cursor.execute('''CREATE TABLE IF NOT EXISTS users
                  (id INTEGER PRIMARY KEY, name TEXT, age INTEGER)''')

# 插入数据
cursor.execute("INSERT INTO users (name, age) VALUES (?, ?)", ('Alice', 30))
cursor.execute("INSERT INTO users (name, age) VALUES (?, ?)", ('Bob', 25))

# 查询数据
cursor.execute("SELECT * FROM users")
rows = cursor.fetchall()
for row in rows:
    print(row)

# 提交并关闭连接
conn.commit()
conn.close()

3. 连接MySQL数据库

MySQL是一种常见的关系型数据库管理系统。使用Python连接MySQL需要使用相应的库，比如mysql-connector-python。以下是连接并操作MySQL数据库的示例代码：

import mysql.connector

# 连接到 MySQL 数据库
conn = mysql.connector.connect(
    host="localhost",
    user="username",
    password="password",
    database="mydatabase"
)

# 创建一个游标对象
cursor = conn.cursor()

# 创建表
cursor.execute('''CREATE TABLE IF NOT EXISTS users
                  (id INT AUTO_INCREMENT PRIMARY KEY, name VARCHAR(255), age INT)''')

# 插入数据
sql = "INSERT INTO users (name, age) VALUES (%s, %s)"
val = ("Alice", 30)
cursor.execute(sql, val)

# 查询数据
cursor.execute("SELECT * FROM users")
rows = cursor.fetchall()
for row in rows:
    print(row)

# 提交并关闭连接
conn.commit()
conn.close()

4. 代码解析

  • 连接数据库：使用sqlite3.connect()连接SQLite数据库，使用mysql.connector.connect()连接MySQL数据库。

  • 创建表：通过执行SQL语句创建表，使用cursor.execute()方法执行。

  • 插入数据：执行插入数据的SQL语句，使用cursor.execute()方法并传入参数。

  • 查询数据：执行查询数据的SQL语句，使用cursor.execute()方法，然后使用cursor.fetchall()获取所有查询结果。

  • 提交和关闭连接：对于SQLite，使用conn.commit()提交事务并使用conn.close()关闭连接。对于MySQL，同样使用conn.commit()提交事务，但需要使用conn.close()关闭连接。

通过这些示例代码，你可以轻松地使用Python连接和操作SQLite和MySQL数据库。务必记住在实际应用中，要处理好异常情况，并采取安全措施，如防止SQL注入等。

5. 数据库连接参数

在连接数据库时，需要提供一些参数以确保正确的连接。对于SQLite，只需提供数据库文件的路径即可。而对于MySQL，除了数据库名称外，还需要提供主机名、用户名和密码等信息。

  • 对于SQLite连接：

    • sqlite3.connect('example.db')

  • 对于MySQL连接：

    conn = mysql.connector.connect(
    host="localhost",
    user="username",
    password="password",
    database="mydatabase"
)

6. 数据库操作的异常处理

在实际应用中，数据库操作可能会出现各种异常情况，比如连接失败、SQL语法错误等。因此，在进行数据库操作时，务必添加适当的异常处理机制，以提高程序的健壮性和稳定性。

以下是一个简单的异常处理示例：

import sqlite3
import mysql.connector

try:
    # SQLite 连接
    conn_sqlite = sqlite3.connect('example.db')
    cursor_sqlite = conn_sqlite.cursor()

    # MySQL 连接
    conn_mysql = mysql.connector.connect(
        host="localhost",
        user="username",
        password="password",
        database="mydatabase"
    )
    cursor_mysql = conn_mysql.cursor()

    # 进行数据库操作（省略）

except sqlite3.Error as e:
    print("SQLite error:", e)

except mysql.connector.Error as e:
    print("MySQL error:", e)

finally:
    # 关闭连接
    if conn_sqlite:
        conn_sqlite.close()
    if conn_mysql:
        conn_mysql.close()

7. 参数化查询

在执行SQL语句时，尤其是涉及用户输入的情况下，应该使用参数化查询来防止SQL注入攻击。参数化查询可以确保用户输入不会被误解为SQL代码的一部分。

下面是一个使用参数化查询的示例：

import sqlite3
import mysql.connector

# SQLite 连接
conn_sqlite = sqlite3.connect('example.db')
cursor_sqlite = conn_sqlite.cursor()

# MySQL 连接
conn_mysql = mysql.connector.connect(
    host="localhost",
    user="username",
    password="password",
    database="mydatabase"
)
cursor_mysql = conn_mysql.cursor()

# 参数化查询
name = "Alice"
age = 30

# SQLite 参数化查询
cursor_sqlite.execute("INSERT INTO users (name, age) VALUES (?, ?)", (name, age))

# MySQL 参数化查询
sql = "INSERT INTO users (name, age) VALUES (%s, %s)"
val = (name, age)
cursor_mysql.execute(sql, val)

# 提交事务并关闭连接
conn_sqlite.commit()
conn_sqlite.close()

conn_mysql.commit()
conn_mysql.close()

8. ORM框架

ORM（Object-Relational Mapping）框架可以将数据库表的行映射为Python对象，简化了数据库操作。在Python中，有许多流行的ORM框架，比如SQLAlchemy、Django的ORM等。这些框架提供了高级的抽象和功能，使得与数据库的交互更加方便和直观。

以下是一个使用SQLAlchemy进行数据库操作的示例：

from sqlalchemy import create_engine, Column, Integer, String
from sqlalchemy.ext.declarative import declarative_base
from sqlalchemy.orm import sessionmaker

# 创建引擎
engine = create_engine('sqlite:///example.db', echo=True)

# 声明基类
Base = declarative_base()

# 定义映射类
class User(Base):
    __tablename__ = 'users'

    id = Column(Integer, primary_key=True)
    name = Column(String)
    age = Column(Integer)

# 创建数据表
Base.metadata.create_all(engine)

# 创建会话
Session = sessionmaker(bind=engine)
session = Session()

# 插入数据
user1 = User(name='Alice', age=30)
user2 = User(name='Bob', age=25)
session.add(user1)
session.add(user2)
session.commit()

# 查询数据
users = session.query(User).all()
for user in users:
    print(user.id, user.name, user.age)

# 关闭会话
session.close()

9. 使用SQLite内存数据库

除了连接到文件中的SQLite数据库，还可以使用SQLite内存数据库。SQLite内存数据库完全存储在RAM中，对于临时性的数据处理或测试非常方便。

以下是一个使用SQLite内存数据库的示例：

import sqlite3

# 连接到内存数据库
conn = sqlite3.connect(':memory:')

# 创建一个游标对象
cursor = conn.cursor()

# 创建表
cursor.execute('''CREATE TABLE users
                  (id INTEGER PRIMARY KEY, name TEXT, age INTEGER)''')

# 插入数据
cursor.execute("INSERT INTO users (name, age) VALUES (?, ?)", ('Alice', 30))
cursor.execute("INSERT INTO users (name, age) VALUES (?, ?)", ('Bob', 25))

# 查询数据
cursor.execute("SELECT * FROM users")
rows = cursor.fetchall()
for row in rows:
    print(row)

# 提交并关闭连接
conn.commit()
conn.close()

10. 数据库连接池

在高并发的应用中，频繁地打开和关闭数据库连接会消耗大量资源。为了提高性能，可以使用数据库连接池技术，将数据库连接预先创建好并保存在池中，需要时从池中获取连接，使用完毕后归还到池中。

以下是使用sqlitepool库实现SQLite数据库连接池的示例：

from sqlitepool import ConnectionPool

# 创建数据库连接池
pool = ConnectionPool('example.db', max_connections=5)

# 从连接池中获取连接
conn = pool.getconn()

# 创建游标对象
cursor = conn.cursor()

# 执行查询
cursor.execute("SELECT * FROM users")
rows = cursor.fetchall()
for row in rows:
    print(row)

# 释放连接回连接池
pool.putconn(conn)

11. 性能优化

在进行大规模数据操作时，需要考虑性能优化。一些常见的性能优化策略包括：

  • 使用索引来加速查询。
  • 合理设计数据库结构，避免过度规范化或反规范化。
  • 批量操作数据，减少数据库交互次数。
  • 缓存查询结果，减少重复查询数据库的次数。

12. 使用异步数据库库

随着异步编程的流行，出现了许多支持异步操作的数据库库，如aiosqlite和aiomysql。这些库可以与异步框架（如asyncio）结合使用，提高程序的并发性能。

以下是一个使用aiosqlite库进行异步SQLite数据库操作的示例：

import asyncio
import aiosqlite

async def main():
    # 连接到 SQLite 数据库
    async with aiosqlite.connect('example.db') as db:
        # 创建一个游标对象
        cursor = await db.cursor()

        # 创建表
        await cursor.execute('''CREATE TABLE IF NOT EXISTS users
                               (id INTEGER PRIMARY KEY, name TEXT, age INTEGER)''')

        # 插入数据
        await cursor.execute("INSERT INTO users (name, age) VALUES (?, ?)", ('Alice', 30))
        await cursor.execute("INSERT INTO users (name, age) VALUES (?, ?)", ('Bob', 25))

        # 查询数据
        await cursor.execute("SELECT * FROM users")
        rows = await cursor.fetchall()
        for row in rows:
            print(row)

# 运行异步主程序
asyncio.run(main())

13. 数据库迁移

在实际项目中，随着需求的变化，可能需要对数据库结构进行修改，这时候就需要进行数据库迁移（Migration）。数据库迁移工具可以帮助我们管理数据库结构变更的过程，并确保数据的一致性。

对于SQLite，可以使用sqlite3自带的支持。对于MySQL等数据库，常用的迁移工具包括Alembic、django.db.migrations等。

以下是一个简单的数据库迁移示例（以SQLite为例）：

import sqlite3

# 连接到 SQLite 数据库
conn = sqlite3.connect('example.db')
cursor = conn.cursor()

# 执行迁移操作（修改表结构）
cursor.execute("ALTER TABLE users ADD COLUMN email TEXT")

# 提交并关闭连接
conn.commit()
conn.close()

14. 备份与恢复

定期备份数据库是保障数据安全的重要措施之一。备份可以通过数据库管理工具或编程方式来实现，具体方法取决于数据库类型和需求。

以下是一个简单的备份数据库的示例（以SQLite为例）：

import shutil

# 备份数据库文件
shutil.copyfile('example.db', 'example_backup.db')

在实际应用中，备份数据库时需要考虑数据库是否处于活动状态、备份文件存储位置、备份周期等因素。

15. 使用环境变量管理数据库连接信息

在实际项目中，将数据库连接信息硬编码在代码中可能不够安全或不够灵活。一种更好的做法是使用环境变量来管理敏感信息，比如数据库的主机名、用户名和密码等。

以下是一个使用环境变量管理数据库连接信息的示例：

import os
import sqlite3
import mysql.connector

# 从环境变量中获取数据库连接信息
DB_HOST = os.getenv('DB_HOST', 'localhost')
DB_USER = os.getenv('DB_USER', 'username')
DB_PASSWORD = os.getenv('DB_PASSWORD', 'password')
DB_NAME = os.getenv('DB_NAME', 'mydatabase')

# SQLite 连接
conn_sqlite = sqlite3.connect('example.db')
cursor_sqlite = conn_sqlite.cursor()

# MySQL 连接
conn_mysql = mysql.connector.connect(
    host=DB_HOST,
    user=DB_USER,
    password=DB_PASSWORD,
    database=DB_NAME
)
cursor_mysql = conn_mysql.cursor()

# 进行数据库操作（省略）

# 关闭连接
conn_sqlite.close()
conn_mysql.close()

通过使用环境变量，我们可以轻松地在不同的环境中切换数据库连接信息，而无需修改代码。

16. 使用配置文件管理数据库连接信息

除了使用环境变量，还可以使用配置文件来管理数据库连接信息。这种方法更加灵活，可以根据需要配置不同的环境，如开发环境、测试环境和生产环境等。

以下是一个使用配置文件管理数据库连接信息的示例：

import configparser
import sqlite3
import mysql.connector

# 从配置文件中读取数据库连接信息
config = configparser.ConfigParser()
config.read('config.ini')

DB_HOST = config.get('Database', 'host')
DB_USER = config.get('Database', 'user')
DB_PASSWORD = config.get('Database', 'password')
DB_NAME = config.get('Database', 'database')

# SQLite 连接
conn_sqlite = sqlite3.connect('example.db')
cursor_sqlite = conn_sqlite.cursor()

# MySQL 连接
conn_mysql = mysql.connector.connect(
    host=DB_HOST,
    user=DB_USER,
    password=DB_PASSWORD,
    database=DB_NAME
)
cursor_mysql = conn_mysql.cursor()

# 进行数据库操作（省略）

# 关闭连接
conn_sqlite.close()
conn_mysql.close()

通过配置文件的方式，我们可以将数据库连接信息集中管理，便于维护和修改。

17. 数据库连接的安全性考虑

在连接数据库时，需要考虑安全性问题，特别是涉及到密码和敏感信息的处理。一些常见的安全性措施包括：

  • 不要将敏感信息硬编码在代码中，而是使用环境变量或配置文件管理。
  • 使用加密技术保护敏感信息在传输过程中的安全性。
  • 使用强密码，并定期更换密码。
  • 限制数据库用户的权限，避免赋予过高的权限。

通过采取这些安全性措施，可以有效保护数据库连接信息和数据的安全。

总结

本文介绍了使用Python进行数据库连接与操作的多种方法和技术。首先，我们学习了如何使用Python连接和操作SQLite和MySQL数据库，包括创建表、插入数据、查询数据等基本操作。然后，我们探讨了一些高级技术，如参数化查询、ORM框架、异步数据库库、数据库迁移、备份与恢复等，这些技术可以提高数据库操作的效率和安全性。此外，我们还介绍了如何使用环境变量和配置文件来管理数据库连接信息，以及一些数据库连接的安全性考虑。通过这些技术和方法，我们可以更好地管理和保护数据库，使得数据库编程更加安全、灵活和高效。

在实际项目中，我们需要根据项目需求和安全标准选择合适的技术和工具，确保数据库连接和操作的安全性和可靠性。同时，我们也要不断学习和探索新的技术，以跟上数据库领域的发展和变化。希望本文能够帮助读者更好地理解和应用Python数据库编程的相关知识，为实际项目开发提供帮助和指导。

在这里插入图片描述

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/1526763.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

8年测试总结，自动化测试必要注意点+自动化测试框架（汇总）

8年测试总结，自动化测试必要注意点+自动化测试框架（汇总）

目录：导读 前言一、Python编程入门到精通二、接口自动化项目实战三、Web自动化项目实战四、App自动化项目实战五、一线大厂简历六、测试开发DevOps体系七、常用自动化测试工具八、JMeter性能测试九、总结（尾部小惊喜） 前言 1、开始自动化测试…
阅读更多...
win修改图标自定义QQ桌面图标

win修改图标自定义QQ桌面图标

当安装了TIM后，想把图标改成QQ 图标见顶部，或通过网盘下载 提取码：9Ayc 操作步骤： 1.桌面右键图标，点击属性 2.选择快捷方式-更改图标 3.浏览选择下载的ico图标即可
阅读更多...
2024最新阿里云幻兽帕鲁搭建服务器_Palworld联机多人游戏

2024最新阿里云幻兽帕鲁搭建服务器_Palworld联机多人游戏

玩转幻兽帕鲁服务器，阿里云推出新手0基础一键部署幻兽帕鲁服务器教程，傻瓜式一键部署，3分钟即可成功创建一台Palworld专属服务器，成本仅需26元，阿里云服务器网aliyunfuwuqi.com分享2024年新版基于阿里云搭建幻兽帕鲁服…
阅读更多...
Python装饰器：如何访问和设置私有属性？

Python装饰器：如何访问和设置私有属性？

大家好，今天我和大家聊一聊如何使用装饰器来访问和设置私有属性。 你有没有遇到过这样的场景：你有一个对象，它的属性是私有的，你想要在不影响原有代码的情况下，对这些私有属性进行操作。这时候，装饰器就派…
阅读更多...
【JAVA】Servlet开发

【JAVA】Servlet开发

目录 HttpServlet HttpServletRequest HttpServletResponse 错误页面 设置网页自动刷新时间 构造重定向相应 js发起http请求 服务器端对js发起的http请求进行处理 前端获取后端数据，添加到当前页面的末尾，代码示例： 前后端交互&…
阅读更多...
微信小程序 nodejs+vue+uninapp学生在线选课作业管理系统

微信小程序 nodejs+vue+uninapp学生在线选课作业管理系统

基于微信小程序的班级作业管理助手使用的是MySQL数据库，nodejs语言和IDEA以及微信开发者工具作为开发工具，这些技术和工具我在日常的作业中都经常的使用，并且因为对编程感兴趣，在闲暇时间也进行的进行编程的提高，所以在…
阅读更多...
Leet code 1658 将x减到0的最小操作数

Leet code 1658 将x减到0的最小操作数

解题思路：滑动窗口 主要思想：正难逆简 题目需要左找一个数 右找一个数 我们不如直接找中间最长的一连串子数让这串子树和为 数组子树和减去X 找不到就返回 -1 滑动窗口双指针从左端出发，进行 进窗口 判断 出窗口 更新结果四个步骤 代码…
阅读更多...
bugreport中查看开发者选项动画时长缩放日志

bugreport中查看开发者选项动画时长缩放日志

首先打开开发者选项，抓取一份bugreport解压后找到bugreport-机型-时间点.zip文件，然后再解压此文件 解压后进入该文件，找到bugreport-机型-时间点.txt文件 打开此文件，搜索“animator_duration_scale”关键字，找到图片…
阅读更多...
9成省份“鸿蒙化”，它真起来了？

9成省份“鸿蒙化”，它真起来了？

自去年9月华为宣布鸿蒙原生应用全面启动以来，鸿蒙正以不可阻挡之势，快速在全国千行百业的移动应用领域推进。不仅有支付宝、快手、淘宝、京东等超200家头部互联网企业加入鸿蒙生态；2024年以来，上海、浙江、广西等多省市政务民生、…
阅读更多...
1.中医学习-总论

1.中医学习-总论

目录 1.为什么要学中医 2.什么是中医 介绍 中医例子1： 中医例子2: 中医最高境界“大道至简” 中医讲究的是本质 中医核心：阴阳、表里、寒热、虚实 ​编辑医不叩门 3.阴阳 1.一天中的阴阳 2.一年中的阴阳 3.阴阳之间的关系 4.阴阳四季的变化 …
阅读更多...
【vue elementUI】修改el-dropdown样式

【vue elementUI】修改el-dropdown样式

实现效果如下&#xff1a; 代码如下&#xff1a; <el-dropdown trigger"click" command"handleCommand" active-text-color"#606266"><span class"product-card">{{getCategoryName(categoryId)}}</span><el-dro…
阅读更多...
基于SpringBoot和Vue的图书个性化推荐系统的设计与实现

基于SpringBoot和Vue的图书个性化推荐系统的设计与实现

今天要和大家聊的是一款基于SpringBoot和Vue的图书个性化推荐系统。 &#x1f495;&#x1f495;作者&#xff1a;李同学 &#x1f495;&#x1f495;个人简介&#xff1a;混迹在java圈十年有余&#xff0c;擅长Java、微信小程序、Python、Android等&#xff0c;大家有这一块的…
阅读更多...
代码随想录算法训练营第day29|491.递增子序列、 46.全排列、 47.全排列 II

代码随想录算法训练营第day29|491.递增子序列、 46.全排列、 47.全排列 II

目录 491.递增子序列 46.全排列 47.全排列 II 491.递增子序列 力扣题目链接 给定一个整型数组, 你的任务是找到所有该数组的递增子序列&#xff0c;递增子序列的长度至少是2。 示例: 输入: [4, 6, 7, 7]输出: [[4, 6], [4, 7], [4, 6, 7], [4, 6, 7, 7], [6, 7], [6, 7,…
阅读更多...
Avalon总线学习

Avalon总线学习

Avalon总线学习 avalon总线可以分为&#xff1a; Avalon clock interface Avalon reset interface Avalon Memory mapped interface Avalon iterrupt interface Avalon streaming interface Avalon tri-state conduit interface Avalon conduit interface 1、Avalon c…
阅读更多...
【LeetCode热题100】206. 反转链表（链表）

【LeetCode热题100】206. 反转链表（链表）

一.题目要求 给你单链表的头节点 head &#xff0c;请你反转链表&#xff0c;并返回反转后的链表。 二.题目难度 简单 三.输入样例 示例 1&#xff1a; 输入&#xff1a;head [1,2,3,4,5] 输出&#xff1a;[5,4,3,2,1] 示例 2&#xff1a; 输入&#xff1a;head [1,2…
阅读更多...
【系统架构设计师】软件架构设计 02

【系统架构设计师】软件架构设计 02

系统架构设计师 - 系列文章目录 01 系统工程与信息系统基础 02 软件架构设计 文章目录 系统架构设计师 - 系列文章目录 文章目录 前言 一、软件架构的概念 ★★★ 二、基于架构的软件开发 ★★★★ 三、软件架构风格 ★★★★ 1.数据流风格 2.调用/返回风格 3.独立构件风格…
阅读更多...
PlantUML Integration 编写短信服务类图

PlantUML Integration 编写短信服务类图

PlantUML Integration 写一个类图&#xff0c;主要功能为 1、编写一个serviceSms短信服务类&#xff1b; 2、需要用到短信的地方统一调用基建层的服务即可&#xff1b; 3、可以随意切换、增加短信厂商&#xff0c;不需要更改场景代码&#xff0c;只需要更改application.yml 里面…
阅读更多...
搜索二叉树迭代和递归的两种*简单*实现方式

搜索二叉树迭代和递归的两种*简单*实现方式

判断搜索二叉树 概念 一棵树所有结点的左节点小于父节点&#xff0c;右节点大于父节点&#xff0c;则为搜索二叉树。 迭代方法 中序遍历二叉树&#xff0c;如果总是升序则是搜索二叉树。如果存在降序&#xff0c;那肯定不是搜索二叉树。 Coding checkTreeOrder()方法 boo…
阅读更多...
【Godot4自学手册】第二十六节用GPUParticles2D节点实现地宫入口的奇异光芒

【Godot4自学手册】第二十六节用GPUParticles2D节点实现地宫入口的奇异光芒

我们的主人公与NPC对话完成后&#xff0c;夜晚来临&#xff0c;在城北有一处乱石岗&#xff0c;出现了奇异光芒&#xff0c;这是地宫的入口&#xff0c;但是有一妖怪把守&#xff0c;我们必须消灭妖怪后才可发现地宫入口。这一节&#xff0c;主要记录利用粒子系统GPUParticles2…
阅读更多...
YOLOv9目标识别——环境配置与训练自己的数据集

YOLOv9目标识别——环境配置与训练自己的数据集

前言 YOLOv9引入了一种全新的计算机视觉模型架构&#xff0c;相比目前流行的YOLO模型&#xff08;如YOLOv8、YOLOv7和YOLOv5&#xff09;&#xff0c;在MS COCO数据集上取得了更高的mAP&#xff08;平均精度均值&#xff09;。 YOLOv9是由Chien-Yao Wang、I-Hau Yeh和Hong-Yua…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023