SQLite读取分析指南：新手也能轻松上手的实用教程

news2024/9/23 6:27:27

SQLite是一个轻量级的关系型数据库，目前已经更新到SQLite3版本。它不仅具有跨平台的特性而且占用的资源非常低，目标是设计来做嵌入式的。本教程将深入浅出地讲解图形化界面和python脚本来读取sqlite数据库这两种方法,从基础概念到实际应用,step by step地引导您掌握SQLite数据读取与分析的精髓。无论您的目标是优化数据库性能、进行商业智能分析,还是开发数据密集型应用,本指南都将是您的得力助手。

一、引言
- 1.1什么是SQLite？
二、SQLite基础知识详解
- 2.1 SQLite数据库结构简介
- 2.2 常见的SQLite数据类型
- 2.3 SQLite特性
三、使用图形化界面读取SQLite数据
- DB Browser for SQLite（免费）
- DbGate（免费）
- 其他图形化界面工具
四、使用Python脚本读取SQLite数据
- 4.1 Python环境设置
- 4.2 连接到SQLite数据库文件
- 4.3 执行基本查询
- - 4.3.1 获取所有表名
  - 4.3.2 获取指定表的所有列名
  - 4.3.3 打印表中的数据
  - 4.3.4 关闭游标和连接
- 4.4 优化查询结果
- - 4.4.1 安装pandas
  - 4.4.2 简单示例
五、推荐进阶学习资源
六、总结
七、结语

一、引言

1.1什么是SQLite？

SQLite是一个轻量级的关系型数据库，目前已经更新到SQLite3版本。它不仅具有跨平台的特性而且占用的资源非常低，目标是设计来做嵌入式的。

二、SQLite基础知识详解

这一段落是理论部分，大家按需阅读，有基础知识的读者可以直接到下一段落

2.1 SQLite数据库结构简介

SQLite是一种轻量级的关系型数据库管理系统（RDBMS），与传统的数据库系统如MySQL、PostgreSQL相比，SQLite的独特之处在于其“嵌入式”特性。SQLite将整个数据库存储在一个单一的文件中，这使得它非常便携和易于管理。以下是SQLite数据库结构的几个关键点：

数据库文件：所有数据、表、视图、索引和触发器都存储在一个单一的文件中，这个文件可以很容易地复制、传输和备份。
无服务器：SQLite不需要一个单独的服务器进程来运行，应用程序直接通过SQLite库与数据库文件进行交互。
自给自足：SQLite它不依赖任何外部库或配置，这使得它在各类平台和环境中都可以顺利运行。

2.2 常见的SQLite数据类型

NULL：表示空值。
INTEGER：表示有符号整数，可以存储在1、2、3、4、6或8字节中。
REAL：表示浮点数，采用8字节的IEEE浮点数格式。
TEXT：表示文本字符串，使用UTF-8、UTF-16BE或UTF-16LE编码存储。 BLOB：表示二进制大对象，存储为输入的数据。

在SQLite中，数据类型的概念比其他传统数据库系统更灵活。例如，一个定义为INTEGER的列可以存储字符串值，SQLite不会强制进行类型检查。这种设计为开发者提供了更多的自由，但也要求他们在设计和使用数据库时更加谨慎，以避免数据类型不一致的问题。

2.3 SQLite特性

SQLite与传统的RDBMS如MySQL、PostgreSQL、Oracle等有着显著的区别：

SQLite是一个嵌入式数据库系统，所有的数据库操作都是通过直接读取和写入磁盘文件来完成的。而传统的RDBMS采用客户端-服务器架构，数据库服务器在后台运行，客户端通过网络与服务器通信。

SQLite几乎不需要配置，数据库文件可以直接在应用程序中创建和使用。传统的RDBMS通常需要复杂的安装和配置过程，并且需要专门的数据库管理员进行维护。

SQLite在单用户环境中性能非常优异，但在高并发的多用户环境中，传统的RDBMS通常表现更好。SQLite在写操作时会锁定整个数据库文件，这在高并发写入的场景下可能成为瓶颈。

虽然SQLite支持大部分SQL标准，但它缺乏一些高级功能，例如存储过程、外部连接（Foreign Key Constraints）和部分索引等。而传统的RDBMS通常具有更丰富的功能，适合复杂的企业级应用。

SQLite非常适合移动应用、嵌入式系统、小型网站、开发和测试环境等。而传统的RDBMS更适合大型企业级应用、需要高并发支持和复杂事务处理的场景。

三、使用图形化界面读取SQLite数据

DB Browser for SQLite（免费）

DB Browser for SQLite 是一个免费的 SQLite GUI 可视化管理工具。在很多 Linux 发行版中都可以直接安装并使用。
下载地址
在这里插入图片描述
也可以设置深色模式

在这里插入图片描述

DbGate（免费）

DbGate是一个跨平台的数据库管理工具。它的设计目标是在同时处理多个数据库（MySQL、PostgreSQL、SQLite、Microsoft SQL Server、MongoDB等）时简单易用且高效。除此之外，它还提供了许多高级功能，如模式比较、可视化查询设计器、图表可视化以及批量导入和导出等功能。同时还支持Docker安装
下载地址
在这里插入图片描述

其他图形化界面工具

市面上还有许多Sqlite图形化界面管理工具比如SQLiteStudio 、SQLite Expert、SQLiteFlow、SQLiteGUI、Antares SQL、SQLPro for SQLite、Navicat for SQLite、SQLite Viewer Web App这里我就不再过多介绍了

四、使用Python脚本读取SQLite数据

4.1 Python环境设置

python内置Sqlite3，不需要pip install 包

import sqlite3

4.2 连接到SQLite数据库文件

# 连接到 SQLite 数据库文件
conn = sqlite3.connect('my.sqlite3')
#创建游标cursor来执行SQL语句
cursor = conn.cursor()

4.3 执行基本查询

4.3.1 获取所有表名

cursor.execute("SELECT name FROM sqlite_master WHERE type='table';")
tables = cursor.fetchall()

#打印
print(tables)

4.3.2 获取指定表的所有列名

# 使用双引号包裹表名以避免特殊字符问题
cursor.execute(f'PRAGMA table_info("{table_name}");')
columns = cursor.fetchall()

# 打印
print（columns）

4.3.3 打印表中的数据

# 执行SQL查询，获取 tablename 表中的所有数据
cursor.execute('SELECT * FROM tablename')

# 获取查询结果
rows = cursor.fetchall()

# 打印每一行数据
for row in rows:
    print(row)

4.3.4 关闭游标和连接

cursor.close()
conn.close()

4.4 优化查询结果

可以通过pandas库来以一种更易读的格式处理数据

4.4.1 安装pandas

pip install pandas

4.4.2 简单示例

import sqlite3
import pandas as pd

# 连接到 SQLite 数据库文件
conn = sqlite3.connect('target.sqlite3')

# 使用 pandas 读取target表中的数据
df = pd.read_sql_query("SELECT * FROM target", conn)

# 打印数据框
print(df)

# 关闭连接
conn.close()