mysql高级使用教程

news2024/11/16 15:35:48

mysql体系结构

1.连接层：主要就是做客户端的连接。

2.服务层：主要就是 缓存，分析器，优化器，执行器。

3.引擎层：就是一些存储引擎，包括索引的存储结构。

4.存储层：数据存储的磁盘。

存储引擎

Innodb

1.特点：支持事务，支持行级锁，支持外键。

2.存储结构：xxx.ibd(存储：数据，表结构，索引)

Myisam

1.特点：速度快，支持表级锁。

2.存储结构：xxx.sdi(存储：表结构)，xxx.myd(存储：数据)，xxx.myi(存储：索引)

Memory

1.特点：内存存储，读取速度快。

2.存储结构：xxx.sdi(存储：表结构)

三者区别 

面试题

1.问：Innodb和Myisam的区别？

  • Innodb支持事务，而Myisam不支持事务。
  • Innodb支持行级锁和表级锁，而Myisam只支持表级锁。
  • Innodb支持外键，而Myisam不支持。

2.问：存储引擎的选择上该怎么做？

  • 当要求数据完整性高且并发下需要保证数据的一致性时，我们考虑选择Innodb。
  • 当数据完整性要求不高，只有数据的查询和插入操作时且追求速度，此时我们考虑选择Myisam。

索引

性能分析

1.查询数据库增删改查的次数。 

show global status like '对应数据库的名字';

2.慢查询(在配置文件 /mysql/etc/my.cnf中进行修改)

#开启慢查询

slow_query_log = 1

#设置最长的查询时间

long_query_time = 2

3.explain性能查询工具 

使用规则（索引失效情况）

1.未符合最左前缀原则（在查询条件中混合索引的最左字段必须存在）就会导致索引全部失效，如果在查询条件中跳过顺序使用查询字段会导致部分索引失效。

2.使用范围查询会导致部分索引失效，会导致范围符右侧的索引失效。解决方案：尽可能使用 >=，<=。

3.使用聚合函数会导致索引失效。

4.当查询条件发生自动类型转换（123 -> '123'），会导致索引失效。

5.使用前缀模糊查询（'%abc'，后缀模糊则不会失效），会导致索引失效。

6.使用or关键字可能会导致索引失效，如果有一边查询字段没有索引就会导致全部索引失效。

7.数据分布影响可能会导致索引失效。mysql会对语句进行评估，如果查询的数据基本上大于50~60%就会直接不使用索引进行查询。

索引提示

可能存在某个字段既有单独索引又被包含在复合索引中。

1.建议使用某索引

#建议mysql使用某个索引
select * from database use (column)

2.忽略某个索引

#忽略某个索引
select * from database ignore (column)

3.强制使用某个索引

#强制mysql使用某个索引
select * from database force (column)

前缀索引

# n前缀长度
create index index_name on database(column(n))

面试题

1.问：在Inonodb的索引结构选型上为什么使用B+树？

  • 相比于二叉树，B+树的层数耕更低，减少io操作速度更快。
  • 相比于B树，在非叶子节点上是不存储数据的，因此在非叶子节点上的页就可以存储更多的指针数据，对应的层数就会更低，速度就更快。
  • 相比于hash表，hash只支持等值查询，而B+树支持范围查询，且支持排序，速度更快。

2.问：select id, username, password from database where username='123'，在数据量很大的时候怎么做优化呢？

 对 username和password做联合索引。虽然它是个二级索引，但是在这个二级索引中包含了id的数正好有查询的所有字段，就不会做回表操作。

SQL优化

插入数据

当我们需要插入多条数据的时候，如果一条条插入的话就会出现事务的频繁开启和关闭，效率十分的低下。因此我们可以使用load指令（从本地加载数据），速度上会快很多。因为是顺序插入的原因所以速度上会比乱序插入快很多。

#在客户端连接的时候开启本地环境
mysql --local-infile -u root -p

#全局设置
set global local_infile = 1

#执行对应的本地文件
local data local infile '对应的文件名' into table `tableName` fields terminated  by ',' lines terminated by '\n';

主键

页分裂：主键底层是存到数据页上，一遍主键是自增的，所以会进行顺序存储。但是当数据不按顺序的时候会，数据在找到对应的位置会会将后百分之五十的数据存储到新的页上，如何将新的看数据存储到对应的位置上，最终在调整页的位置。(图中是插入50后的页分裂)

 页合并：但主键进行删除的时候，会先将要删除的数据进行标记，当达到阈值（MERGE_THRESHOLD）时就会进行删除，并判断前后侧的页是否能合并，能就进行合并，最终出现页合并。

主键设置的原则

1.在满足业务要求的情况下，尽量保证主键的长度较短。因为二级索引中的数据就会主键，当二级索引多的情况就会占用大量的空间，并在数据的读取的时候需要大量的io操作。

2.插入的主键尽量保证有序也就是自增，减少页分裂发生的概率。

3.尽量不要使用uuid作为主键。这会导致页分裂的概率大大增加。

4.在编写业务时，尽量不要修改主键，避免页分裂的发生。

Order By 

在使用Order By的时候如果没有使用索引的话就会在缓冲区中按照对应的字段进行排序，效率上比较低，因此我们可以创建对应的索引结构来减少此排序操作。

Order By 优化

1. 在使用排序语句的时候要创建索引，当存在多个字段的时候我们可以使用混合索引，达到覆盖索引的效果，并且在这个过程中符合最左前缀原则。

2.当排序字段存在已升序一降序的时候，我们在创建对应的混合索引的时候也要设置对应的排序方式。（默认是升序）

3.如果无法避免缓冲区排序的操作，那么我们可以设置更大的缓存区。

limit

使用覆盖索引 + 子查询来优化sql，先通过条件查询出符合条件的主键信息，已改主键最为一张表查询对应的所有字段信息。

count

count(主键)：直接遍历整张表,把每行的id取出来，因为主键不可为null。

count(字段)：遍历整张表,把每行的字段值取出来，但值不为null直接总个数 + 1.

count(*)：遍历整张表，但不会取值，速度较快。

count(num)：遍历整张表并且不会取值，对不为null的行放个num进去，并进行累加。

update

要确保操作的字段存在索引，这样就可以保证在每次进行事务操作的时候只会使用行级锁，如果操作的字段不是索引就会导致行级锁升级为表级锁。但是事务并发场景效率低下。

锁

表级锁

锁的类型

1.表级锁。

2.元数据锁。

3.意向锁：为了解决加锁冲突，在innodb中行锁和表锁加锁的冲突问题。（意向锁之间是相互兼容的）

意向共享锁（IS）：在执行select...lock in share mode语句的时候就会添加该锁。(其与表锁中的读锁是兼容的，和写锁是互斥的)

意向排他锁(IX)：在执行 insert,update,select...for update时添加。（其与表锁中的读写锁都互斥）

行级锁

锁的类型

1.行级锁：锁住对应行的数据，防止其他事务修改，在读已提交，可重复读级别下都是支持的。分为共享锁和排他锁。

2.间隙锁：锁住索引之间的间隙。防止其他事务做insert操作导致幻读的情况，可重复读级别下是支持的。

3.临键锁：可以理解成行级锁 + 间隙锁，其会锁住行数据和数据前后的间隙。可重复读级别下是支持的。

如果在做insert操作的时候，对应的条件字段没有建立索引的话就会导致锁升级：行级锁->表级锁。

行锁的使用

1.如果条件字段是唯一索引，并且给不存在的数据加锁的时候（就比如需要某个不存在的数据时），就会添加间隙锁，锁住该数据应该存储的位置的间隙。

2.如果条件字段不是唯一索引，相同的数据会相邻存储，会使用临键锁，锁住当前数据和数据前后的间隙。（如果条件时 >=这种区间的话，就会锁住当前行和后续的间隙吗，对应的无穷大）

3.间隙锁是可以共存的，一个事务使用的间隙锁不会影响其他事务使用间隙锁。

InnoDB引擎

内存结构

框架结构

 内存区

1.Buffer Pool：缓存区，减少io操作，加快速度。

2.Change Buffer（针对非唯一非一二级索引）：更改缓冲区，在执行DML（增删改查），如果缓冲区中没有该数据的话就会像存储到Change Buffer中，最终做同步操作。

3.Log Buffer：用于存储日志的缓冲区。

4.在缓冲区中分为三种page：

  • free page：未被使用的page。
  • clean page：被使用但数据没有被修改。
  • dirty page：脏页，数据被修改但是数据未同步。

磁盘区：主要就是存储change page，rado log， undolog等一些表的信息。

后台线程：用于做缓冲区和磁盘的同步。

1.Mater Thread：核心后台线程，负责调度其他线程。

2.IO Thread：主要就是负责做IO的操作。

3.Purge Thread：主要就是负责回收事务已提交的undo log，在事务提交后undo log就需要被回收。

4.Page Cleaner Thread

协助Master Thread 刷新脏数据到磁盘中，减少堵塞。

MVCC

当前读：读取的就是最新的版本的数据

快照读：读取的数据可能是历史版本。

MVCC的三大部分

1.隐藏字段:

DB_TRX_ID(事务id)：当前修改的事务。

DB_ROLL_ID(指向上一版本的地址)：回滚指针，通过undo和回滚指针构成版本链。

DB_ROW_ID(主键id)：当不存在主键或唯一索引的时候机会自动生成隐藏的主键id。

2.undo：用于表示不同的版本。

3.readview：用于选择版本，按照规则选择版本。

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/1387419.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

CSS实现超出部分的省略

CSS实现超出部分的省略

1、为什么要省略 在日常开发过程中我们难免会遇到后端返回给我们的的数据太长的情况&#xff0c;此时我们通常采取的是...的省略方式&#xff0c;其中的CSS大致如下&#xff0c;既可以实现对应的省略显示&#xff0c;但有些时候我们有需要用户可以查看具体的完整信息&#xff0…
阅读更多...
内网yum仓库 ftp；http方式

内网yum仓库 ftp；http方式

ftp方式 服务端 客户端 vim /etc/yum.repos.d/ftp.repo http方式 服务端 yum install httpd -y systemctl start httpd cd /var/www/html/ mkdir centos7 mount /dev/sr0 /var/www/html/centos7 客户端
阅读更多...
*（长期更新）软考网络工程师学习笔记——Section 22 无线局域网

*（长期更新）软考网络工程师学习笔记——Section 22 无线局域网

目录 一、IEEE 802.11的定义二、IEEE 802.11系列标准三、IEEE 802.11的两种工作模式四、CDMA/CA协议&#xff08;一&#xff09;CDMA/CA协议的定义&#xff08;二&#xff09;CDMA/CA协议的过程 五、AC与AP&#xff08;一&#xff09;接入控制器AC&#xff08;二&#xff09;无…
阅读更多...
go的安装及配置

go的安装及配置

go的官方下载地址&#xff1a;All releases - The Go Programming Language​​​​​​ 1、找到对应的版本包下载&#xff0c;例如 wget https://golang.google.cn/dl/go1.21.6.linux-amd64.tar.gz 2、下载完成后配置解压Go源码包 tar -zxf go1.21.6.linux-amd64.tar.gz 3…
阅读更多...
32 二叉树的定义

32 二叉树的定义

之前的通用树结构 采用双亲孩子表示法模型 孩子兄弟表示法模型 引出二叉树 二叉树的定义&#xff1a; 满二叉树和完全二叉树 对此图要有印象 满二叉树一定是完全二叉树&#xff0c;但是完全二叉树不一定是满二叉树 小结
阅读更多...
博客摘录「 性能优化：__builtin_expect详解」2024年1月15日

博客摘录「 性能优化：__builtin_expect详解」2024年1月15日

性能优化&#xff1a;__builtin_expect详解___builtin_expect对性能的影响-CSDN博客https://blog.csdn.net/chudongfang2015/article/details/75710848 #define LIKELY(x) __builtin_expect(!!(x), 1) __builtin_expect宏定义中为何写成!!(x)&#xff1f; 首先__buildin_expec…
阅读更多...
buuctf-Misc 题目解答分解118-120

buuctf-Misc 题目解答分解118-120

118.[INSHack2017]sanity 打开压缩包就是一个md 文件 typora 打开 发现flag INSA{Youre_sane_Good_for_you} 119.粽子的来历 解压压缩包 &#xff0c;得到文件夹如下 用010 editor 打开 我是A.doc 这个有些可以 都改成FF 保存 然后再次打开 docx 文件就发现了屈原的诗 其他b…
阅读更多...
雍禾医疗好医生：雍禾植发张华医生立志服务好毛发患者

雍禾医疗好医生：雍禾植发张华医生立志服务好毛发患者

作为中国领先的专门从事毛发医疗服务的医疗集团&#xff0c;雍禾医疗提供诊疗、植发、养固等一站式毛发医疗服务&#xff0c;旗下拥有由专业植发品牌“雍禾植发”、医疗养固品牌“史云逊”、女性美学植发品牌“雍禾发之初”及医学假发品牌“哈发达”等组成的全产业链品牌矩阵。…
阅读更多...
【Spring 篇】SpringMVC的数据响应：编织美妙的返回乐章

【Spring 篇】SpringMVC的数据响应：编织美妙的返回乐章

在Web开发的舞台上&#xff0c;数据响应就如同一场美妙的音乐演奏&#xff0c;而SpringMVC作为这场音乐的指挥者&#xff0c;如何优雅地将数据传递给前端&#xff0c;引发了无尽的思考和探索。本篇博客将带你走进SpringMVC的数据响应世界&#xff0c;解开其中的奥秘&#xff0c…
阅读更多...
class_5:在c++中一个类包含另一个类的对象叫做组合

class_5:在c++中一个类包含另一个类的对象叫做组合

#include <iostream> using namespace std;class Wheel{ public://成员数据string brand; //品牌int year; //年限//真正的成员函数void printWheelInfo(); //声明成员函数 };void Wheel::printWheelInfo() {cout<<"我的轮胎品牌是&#xff1a;"<…
阅读更多...
JDBC PrepareStatement 的使用（附各种场景 demo）

JDBC PrepareStatement 的使用（附各种场景 demo）

在 Java 中&#xff0c;与关系型数据库进行交互是非常常见的任务之一。JDBC&#xff08;Java Database Connectivity&#xff09;是 Java 平台的一个标准 API&#xff0c;用于连接和操作各种关系型数据库。其中&#xff0c;PreparedStatement 是 JDBC 中的一个重要接口&#xf…
阅读更多...
数据库多表查询练习题

数据库多表查询练习题

二、多表查询 1. 创建 student 和 score 表 CREATE TABLE student ( id INT ( 10 ) NOT NULL UNIQUE PRIMARY KEY , name VARCHAR ( 20 ) NOT NULL , sex VARCHAR ( 4 ) , birth YEAR , department VARCHAR ( 20 ) , address VARCHAR ( 50 ) ); 创建 s…
阅读更多...
pytest pytest-cov生成代码覆盖率报告

pytest pytest-cov生成代码覆盖率报告

pytest-cov 是一个用于 pytest 的插件&#xff0c;它可以生成代码覆盖率报告。代码覆盖率是一个度量&#xff0c;表示在测试过程中执行了代码的哪些部分。这是一个非常有用的工具&#xff0c;因为它可以帮助你理解你的测试是否全面&#xff0c;是否有遗漏的代码部分。 pytest-c…
阅读更多...
电商物流查询：未来的发展方向

电商物流查询：未来的发展方向

在电商日益繁荣的时代&#xff0c;物流信息查询不仅关乎消费者体验&#xff0c;更影响着电商运营的效率。快速、准确地追踪物流信息至关重要。本文将简述物流信息快速追踪的价值&#xff0c;并重点介绍固乔快递查询助手这一高效查询工具及其批量查询功能。 一、物流信息快速追踪…
阅读更多...
RAG常见七大坑

RAG常见七大坑

论文题目&#xff1a;《Seven Failure Points When Engineering a Retrieval Augmented Generation System》 论文地址&#xff1a;https://arxiv.org/pdf/2401.05856.pdf 这篇论文主要探讨了构建检索增强生成系统&#xff08;Retrieval Augmented Generation, RAG&#xff09;…
阅读更多...
Javaweb之SpringBootWeb案例员工管理分页查询的详细解析

Javaweb之SpringBootWeb案例员工管理分页查询的详细解析

3. 员工管理 完成了部门管理的功能开发之后&#xff0c;我们进入到下一环节员工管理功能的开发。 基于以上原型&#xff0c;我们可以把员工管理功能分为&#xff1a; 分页查询&#xff08;今天完成&#xff09; 带条件的分页查询&#xff08;今天完成&#xff09; 删除员工&…
阅读更多...
【Leetcode 2707】字符串中的额外字符 —— 动态规划

【Leetcode 2707】字符串中的额外字符 —— 动态规划

2707. 字符串中的额外字符 给你一个下标从0开始的字符串s和一个单词字典dictionary。你需要将s分割成若干个互不重叠的子字符串&#xff0c;每个子字符串都在dictionary中出现过。s中可能会有一些额外的字符不在任何子字符串中。 请你采取最优策略分割s&#xff0c;使剩下的字…
阅读更多...
HiDataPlus 3.3.2-005 搭建（个人的一点心得体会 x86 平台）

HiDataPlus 3.3.2-005 搭建（个人的一点心得体会 x86 平台）

HDP 集群搭建 前置安装 yum -y install createrepo yum install -y lrzsz yum install -y wget yum install -y vim修改当前集群机器的主机名 hostnamectl set-hostname XXX​ 这里的 XXX 就是要设置的当前机器的主机名称。主机名称是集群唯一的&#xff0c;一定不要重复&am…
阅读更多...
【栈】Leetcode 496 下一个更大元素I

【栈】Leetcode 496 下一个更大元素I

【栈】Leetcode 496 下一个更大元素I 解法1 两个单调栈解法2 ---------------&#x1f388;&#x1f388;题目链接&#x1f388;&#x1f388;------------------- 解法1 两个单调栈 两个栈进行操作&#xff0c;一个栈用来遍历寻找&#xff0c;一个栈用来保留 将nums2中的元素…
阅读更多...
c语言-数据类型（上）

c语言-数据类型（上）

目录 一、数据类型 二、常量与变量 常量&#xff1a; 变量&#xff1a; 三、进制&#xff08;八&#xff0c;十&#xff0c;十六&#xff09; 十进制&#xff1a; 八进制&#xff1a; 十六进制&#xff1a; 四、基本类型 1.整型常量&#xff1a; 2.整型变量&#xff…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023