数据库 | MYSQL这个复杂系统如何上手?

news2025/1/9 2:20:30

当你不知道从何入手研究或解决一个复杂系统的问题时,通常意味着你没有找到合适的切入点或者缺乏对系统整体和细节之间联系的理解。在这种情况下,一个有用的策略是寻找系统的基本原理或构成要素。

小时候,你可能也玩过玩具四驱车。有的四驱车设计得比较封闭,集成度高,除了换电池外几乎不允许拆卸。而另一种则是可组装的,允许在有限的零件中自由更换,为你提供了丰富的选择空间。我个人偏爱后者,它不仅展示了玩具车的整体构造,还让每一个零件都呈现在我的眼前。对我来说,这不仅仅是一辆车,而是一个由众多零件组成的系统,我能够向我的伙伴详细介绍每个零件独特之处和它们如何共同作用。

其实你也看出来了,当一个被外壳裹挟的四驱车你可能玩过一段时间就不会再去玩它,渐渐被你淡忘。而以一件一件零件的形式摆在你面前,你会更好奇的去探索它,并且印象深刻。

那么我要上第一板斧就是拆解
“要想了解一个复杂系统,我们需要从拆解的角度去看问题”


我们需要分解这个系统

要深入理解一个复杂系统,首先要将其分解成更小、更易于理解的部分。

上大学的时候,老师让我们在自己的计算机上安装一个服务器(更懒的老师可能就直接在机房直接给你安装好,你再软件中操作就是了),然后再从window系统的某个角落掏出一个你不知道什么时候就安装好的自带的客户端,通过远程连接,连上了。然后教你理论知识,什么是范式理论,如何去画一个ER图,接下来就教你第一句MYSQL命令了。可能老师没有点出来,但是这会,你不知不觉就接触到了这个系统,虽然此时蒙上了厚厚的一层灰。你看:
在这里插入图片描述

客户端/服务器模型

现在,我们知道了,MySQL这个系统,它遵循客户端/服务器(Client/Server)模型,其中:
客户端:提供用户接口,允许用户通过各种客户端工具或者是编程语言接口发送SQL查询。
服务器:MySQL服务器是核心组件,负责处理所有数据库命令和操作,包括查询解析、分析、优化以及执行。

连接器

在这里插入图片描述
紧接着我们来到服务器端的连接器。客户端在与服务器进行通信时,首先要和连接器打交道。连接管理器负责处理网络连接、授权客户端、管理连接的安全验证。
授权认证:在这一层,MySQL使用用户名、密码等信息验证连接请求的合法性。
安全:提供SSL加密连接,保证数据传输的安全性。

解析优化执行一条龙

在这里插入图片描述

通过第一关后,MYSQL就可以正儿八经的处理你发送过来的SQL命令了。接收到SQL命令后,MySQL进入查询处理阶段,包括:

解析器:将SQL语句分解成解析树,这一过程涉及词法、语法分析。
预处理器:进一步检查解析树是否符合MySQL规则,包括数据类型和表结构等。
优化器:负责查询优化,决定最有效的查询执行计划
执行器:一旦优化器确定了最佳的查询执行计划,执行器就会按照这个计划来操作数据。

执行器到哪里去取数据呢?答案是存储引擎

存储引擎层

在这里插入图片描述
MySQL提供了插件式的存储引擎架构,不同的存储引擎对数据的存储方式索引技术有着不同的实现。我们常见的存储引擎就有以下两种:
InnoDB:提供事务安全(ACID兼容)、行级锁定和外键约束等。
MyISAM:提供高速存取但不支持事务安全。

要想在MYSQL中使用也很简单,你只需要在创建表的时候加上这么一句就可以:

CREATE TABLE my_table (
    id INT AUTO_INCREMENT PRIMARY KEY,
    name VARCHAR(100)
) **ENGINE=InnoDB**;

当然也可以修改这个表的存储引擎:

ALTER TABLE my_table ENGINE = MyISAM;

其实到了存储引擎层面,软件层的事情就万事大吉了。但是如果你可以再往下探索看到不同存储引擎的存放规则,那你的印象肯定会进一步加深。

数据存储和文件系统

在这里插入图片描述

底层数据存储涉及到如何在物理存储介质(如硬盘)上存储数据和索引文件。不同存储引擎有着不同的文件组织方式和存储格式,如MyISAM为每个表创建独立的文件,而InnoDB使用表空间存储数据和索引。

MyISAM

首先,我们创建一个使用MyISAM存储引擎的表:

CREATE TABLE myisam_table (
    id INT AUTO_INCREMENT PRIMARY KEY,
    name VARCHAR(100)
) ENGINE=MyISAM;

查看磁盘创建了这三个文件:
在这里插入图片描述

  • myisam_table.MYD:这是数据文件,存储表的实际数据。
  • myisam_table.MYI:这是索引文件,存储表的索引信息。
  • myisam_table.frm:这是表定义文件,存储表的结构。

InnoDB

接下来,我们创建一个使用InnoDB存储引擎的表:

CREATE TABLE innodb_table (
    id INT AUTO_INCREMENT PRIMARY KEY,
    name VARCHAR(100)
) ENGINE=InnoDB;

紧接着在磁盘中就找到了这两个文件:

在这里插入图片描述

对于InnoDB表,情况稍有不同:

  • innodb_table.frm:表定义文件,与MyISAM相同,存储表的结构。
  • innodb_table.ibd:当MySQL配置为innodb_file_per_table=ON时,每个InnoDB表的数据和索引会存储在独立的.ibd文件中。如果innodb_file_per_table=OFF,则所有InnoDB表的数据和索引存储在共享表空间ibdata1中。

除此之外,InnoDB还会使用其它一些文件来管理数据。为了避免啰嗦,这里我们按下不表,如果感兴趣可以持续关注我后续的文章,感谢支持。


当然, 会拆玩具可不行,你还得深谙每个零部件的重要作用。接下来是第二板斧

识别其中关键因素

一旦系统被拆解,下一步是识别出影响系统性能稳定性等一些关键因素。

暂停一分钟思考下,有哪些地方是贯穿我们工作的关键要素呢?





数据索引机制

数据索引机制是数据库查询性能优化的核心。索引允许数据库快速定位和检索数据,而无需扫描整个表。MySQL支持多种类型的索引,包括B-Tree索引、全文索引、哈希索引等,每种索引适用于不同的查询类型和数据模式。合理的索引管理策略,包括选择合适的索引类型、维护索引以避免过度索引,对于维持数据库性能至关重要。这甚至可以成为不同程序员的一道分水岭。

查询优化器

你知道要让这个查询走什么样的索引,你说了不算。你要让查询优化器听你的才行。查询优化器负责生成查询的执行计划。它评估多个可能的计划,并选择成本最低(预计最快)的那个执行。调优大部分时间也是围绕它来。通过去分析执行计划,我们可以识别性能瓶颈,进而调整查询语句或数据库结构,实现性能优化。

数据存储方式

你知道软件层面的优化,也要兼顾到硬件层面的事情。那么存储引擎这件事情你就要知晓(虽然现在闭眼就用InnoDB)。数据的组织、存储格式以及如何在磁盘上排列,都直接影响到数据访问的速度和效率。适当的数据模型设计可以减少I/O开销,提高查询性能。对于需要支持复杂事务的应用,选择支持ACID属性的存储引擎(如InnoDB)是关键。事务处理机制确保了数据库操作的原子性、一致性、隔离性和持久性。


我们把它拆回去,有仔细分析了一些我们觉得非常重要的零部件之后。还是要给它装起来,接下来就是第三板斧了

形成整体的视角

通过分解系统并识别关键因素后,我们需要重新将这些部分组合起来,形成对系统整体工作原理的理解。要想有一个整体的视角,我们要怎么训练呢?
我们可以从一个简单的Select/Update语句开始,逐层分析,一点一点剥离出来。
完整的生命周期,从数据被插入数据库开始,经过存储、查询、更新,最终可能被删除,这个过程构成了数据的生命周期。理解数据如何流经MySQL的各个组成部分,是形成整体视角的关键一环。

这里也是你漫长训练求索的过程,通过这样的训练之后,你就会达到拥有整体视角的快感。那还在等什么呢?行动起来!

总结

相信通过拆解复杂系统识别关键因素,并最终形成对系统整体的深入理解,这三板斧,我们可以更有效地诊断问题、提出解决方案和实施改进。这种方法论不仅适用于其它技术系统,也适用于任何复杂的问题解决过程,是一种强大的思维工具。要想精通这一策略,关键在于实践和经验积累,随着时间的推移,我们就能够更快地识别不同系统核心要素,更有效地解决问题。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1520483.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

Github 2024-03-16 Rust开源项目日报 Top10

根据Github Trendings的统计,今日(2024-03-16统计)共有10个项目上榜。根据开发语言中项目的数量,汇总情况如下: 开发语言项目数量Rust项目10TypeScript项目2Go项目1RustDesk: 用Rust编写的开源远程桌面软件 创建周期:1218 天开发语言:Rust, Dart协议类型:GNU Affero Gene…

OCP NVME SSD规范解读-12.Telemetry日志要求

以NVME SSD为例,通常大家想到的是观察SMAR-log定位异常,但是这个信息在多数情况下无法只能支撑完整的定位链路。 定位能力的缺失和低效是数据中心问题解决最大的障碍。 为了解决这个问题,Meta的做法是推进OCP组织加入延迟记录页面。同时NVME协…

经典机器学习模型(一)感知机模型

经典机器学习模型(一)感知机模型 感知机可以说是一个相当重要的机器学习基础模型,是神经网络和支持向量机的基础。 感知机是一个二分类的线性分类模型,之所以说是线性,是因为它的模型是线性形式的。 从《统计学习方法》中,我们…

如何搭建“Docker Registry私有仓库,在CentOS7”?

1、下载镜像Docker Registry docker pull registry:2.7.1 2、运行私有库Registry docker run -d -p 5000:5000 -v ${PWD}/registry:/var/lib/registry --restartalways --name registry registry:2.7.1 3、拉取镜像 docker pull busybox 4、打标签,修改IP&#x…

基于直方图均衡化的图像去雾算法,Matlab实现

博主简介: 专注、专一于Matlab图像处理学习、交流,matlab图像代码/项目合作可以联系(QQ:3249726188) 个人主页:Matlab_ImagePro-CSDN博客 原则:代码均由本人编写完成,非中介,提供有偿…

Spring-1

目录 概念 优点 Autowired和Resource关键字 相同点 不同点 依赖注入的三种方式 概念 Spring 是个java企业级应用的开源开发框架。Spring主要用来开发Java应用,但是有些扩展是针对构建J2EE(Java平台企业版)平台的web应用。Spring 框架目…

熔断降级的方案实现

熔断降级的方案实现 Spring Cloud Netflix Hystrix 提供线程隔离、服务降级、请求缓存、请求合并等功能可与Spring Cloud其他组件无缝集成官方已宣布停止维护,推荐使用Resilience4j代替 Spring Cloud Resilience4j 轻量级服务熔断库 提供类似于Hystrix的功能 具有更…

鸿蒙-自定义组件的生命周期

目录 自定义组件的生命周期 1.aboutToAppear 2.aboutToDisappear 3.onPageShow 4.onPageHide 5.onBackPress 日志输出 1.显示页面 2.页面点击返回按钮 3.页面跳转 4.页面返回 自定义组件的生命周期 先来一段列子 import router from ohos.router Entry Component…

鸿蒙Harmony应用开发—ArkTS声明式开发(容器组件:Badge)

可以附加在单个组件上用于信息标记的容器组件。 说明: 该组件从API Version 7开始支持。后续版本如有新增内容,则采用上角标单独标记该内容的起始版本。 子组件 支持单个子组件。 说明: 子组件类型:系统组件和自定义组件&#xf…

移动云行动:5.5G技术引领数字化转型

刚刚结束的全国两会上,有人大代表建议应尽快发挥5G-A(5.5G)优势,加快试点城市布局。此前,中国移动已宣布将在300多个城市启动5.5G商用部署。在通信技术的历史长河中,4G改变了我们的生活方式,而5…

【UE5】持枪状态站立移动的动画混合空间

项目资源文末百度网盘自取 创建角色在持枪状态站立移动的动画混合空间 在BlendSpace文件夹中单击右键选择动画(Animation)中的混合空间(Blend Space) 选择SK_Female_Skeleton 命名为BS_RifleStand 打开 水平轴表示角色的方向,命名为Direction,方…

springboot+poi-tl根据模板导出word(含动态表格和图片),并将导出的文档压缩zip导出

springbootpoi-tl根据模板导出word&#xff08;含动态表格和图片&#xff09; 官网&#xff1a;http://deepoove.com/poi-tl/ 参考网站&#xff1a;https://blog.csdn.net/M625387195/article/details/124855854 pom导入的maven依赖 <dependency><groupId>com.dee…

Autosar教程-Mcal教程-Lin配置教程

3.7LIN配置、生成 3.7.1 配置通用设置 3.7.2 配置Dem参数 3.7.3 配置Lin通道 3.7.4配置生成命令 参照Dio生成命令方法&#xff0c;创建Lin生成命令&#xff0c;创建完成后按下面提供的信息配置生成命令。 实际上MCAL代码并不能单独生成&#xff0c;它需要和BSW的配置文件一…

内存操作函数(C语言)

目录 memcpy使用和模拟实现 memcpy函数的模拟实现 memmove的使用和模拟实现 memmove的模拟实现 memset函数的使用 memcmp函数的使用 memcpy使用和模拟实现 mem--memory--记忆--内存 函数memcpy从source的位置开始向后复制num个字节的数据到destination指向的内存位置这…

springcloud:4.1 GateWay

概述 Gateway 简介 Spring Cloud Gateway基于Spring 5.0、SpringBoot 2.0和Project Reactor等技术开发 旨在为微服务架构提供一种简单有效的、统一的API路由管理方式&#xff0c;并为微服务架构提供安全、监控、指标和弹性等功能 其目标是替代Zuul特点 易于编写谓词和过滤器&…

MM1: Methods, Analysis Insights from Multimodal LLM Pre-training

MM1: Methods, Analysis & Insights from Multimodal LLM Pre-training 相关链接&#xff1a;arxiv 关键字&#xff1a;多模态学习、大型语言模型、预训练、视觉语言连接、混合专家模型 摘要 本文讨论了构建高性能的多模态大型语言模型&#xff08;MLLMs&#xff09;。特别…

OPTIONS请求(跨域预检查)

目录 一、什么是OPTIONS请求&#xff1f;二、简单请求、复杂请求三、特定的请求头、响应头 一、什么是OPTIONS请求&#xff1f; OPTIONS 请求方式是 HTTP 协议中的一种&#xff0c;主要用于 从响应头中获取服务器支持的HTTP请求方式。 OPTIONS 请求方式是 浏览级行为&#xf…

【SpringCloud微服务实战02】Ribbon 负载均衡

Ribbon使用 Eureka中已经集成了Ribbon,无需额外引入,通过 @LoadBalanced 注解在请求中使用 Ribbon 负载均衡: @Bean @LoadBalancedpublic RestTemplate restTemplate() {return new RestTemplate(); } Ribbon工作流程图 Ribbon负载均衡策略 修改Ribbon负载均衡策略 方式一…

从0开始启动一个Django的docker服务

本文是从0开始启动一个Django的docker服务&#xff0c;包括构建镜像,uwsgi启动服务 在服务器上安装ssh&#xff0c;git&#xff0c;生成公钥并复制到服务器上 # 安装ssh yum install openssh-clients # 生成sshkey ssh-keygen # 查看公钥 cat /root/.ssh/id_rsa.pubclone一下…

Text-to-SQL 工具Vanna | 查看训练数据、删除训练数据

1.查看训练数据vn.get_training_data vn.get_training_data 源码如下&#xff0c;可以看到返回的是df格式的数据 abstractmethoddef get_training_data(self, **kwargs) -> pd.DataFrame:"""Example:pythonvn.get_training_data()This method is used to ge…