【MySQL 数据库】7、SQL 优化

news2024/11/26 17:26:51

目录

  • 一、插入数据优化
    • (1) insert 语句
      • ① 批量插入数据
      • ② 手动控制事务
      • ③ 主键顺序插入,性能要高于乱序插入
    • (2) load 大批量插入数据【☆❀
  • 二、主键优化
    • (1) 数据组织形式
    • (2) 页分裂
    • (3) 页合并
    • (4) 主键设计原则
  • 三、orber by 优化
  • 四、group by 优化
  • 五、limit 优化(分页)
  • 六、count 优化
  • 七、update 优化

一、插入数据优化

(1) insert 语句

① 批量插入数据

insert into tb_test values(1, 'Tom'), (2, 'Cat'), (3, 'Jerry');

② 手动控制事务

start transaction;
insert into tb_test values(1,'Tom'),(2,'Cat'),(3,'Jerry');
insert into tb_test values(4,'Tom'),(5,'Cat'),(6,'Jerry');
insert into tb_test values(7,'Tom'),(8,'Cat'),(9,'Jerry');
commit;

③ 主键顺序插入,性能要高于乱序插入

主键乱序插入 : 8 1 9 21 88 2 4 15 89 5 7 3
主键顺序插入 : 1 2 3 4 5 7 8 9 15 21 88 89【☆】

(2) load 大批量插入数据【☆❀

① 如果需要一次性插入大批量数据(百万级别),使用 insert 语句插入性能很低
② 可使用 MySQL 数据库提供的 load 指令进行插入

在这里插入图片描述


可执行如下指令,将数据脚本文件中的数据加载到表结构中:

-- 客户端连接服务端时,加上参数 -–local-infile
mysql –-local-infile -u root -p

-- 设置全局参数local_infile为1,开启从本地加载文件导入数据的开关
set global local_infile = 1;

-- 执行load指令将准备好的数据,加载到表结构中
load data local infile '/root/sql1.log' into table tb_user fields
terminated by ',' lines terminated by '\n' ;

二、主键优化

主键顺序插入的性能是要高于乱序插入的, 为什么?

(1) 数据组织形式

  • 在 InnoDB 存储引擎中,表数据都是根据主键顺序组织存放的
  • 这种存储方式的表称为索引组织表 (index organized table IOT)

在这里插入图片描述

在这里插入图片描述

在 InnoDB 存储引擎中,数据行是记录在逻辑结构 page 页中的,而每一个页的大小是固定的,默认16K。那也就意味着, 一个页中所存储的行也是有限的,如果插入的数据行 row 在该页存储不小,将会存储到下一个页中,页与页之间会通过指针连接。

(2) 页分裂

  • 页可以为空,也可以填充一半,也可以填充100%
  • 每个页包含了 2-N 行数据
  • 如果一行数据过大,会行溢出,根据主键排列

在这里插入图片描述
在这里插入图片描述

在这里插入图片描述


在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

(3) 页合并

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

(4) 主键设计原则

  • 满足业务需求的情况下,尽量降低主键的长度
  • 插入数据时,尽量选择顺序插入,选择使用 AUTO_INCREMENT 自增主键
  • 尽量不要使用UUID做主键或者是其他自然主键,如身份证号
  • 业务操作时,避免对主键的修改

三、orber by 优化

  • MySQL的排序,有种方式:
  • Using filesort : 全表扫描,读取满足条件的数据行,然后在排序缓冲区 sort buffer 中完成排序操作。所有不是通过索引直接返回排序结果的排序都叫 FileSort 排序
  • Using index : 通过有序索引顺序扫描直接返回有序数据,这种情况即为 using index,不需要额外排序,操作效率高。
  • Using index 的性能高,而 Using filesort 性能低

  • 根据排序字段建立合适的索引,多字段排序时,也遵循最左前缀法则。
  • 尽量使用覆盖索引。
  • 多字段排序, 一个升序一个降序,此时需要注意联合索引在创建时的规则(ASC/DESC)。
  • 如果不可避免的出现filesort,大数据量排序时,可以适当增大排序缓冲区大小 sort_buffer_size(默认256k)。

在这里插入图片描述

四、group by 优化

  • 在分组操作时,可以通过索引来提高效率。
  • 分组操作时,索引的使用也是满足最左前缀法则的

五、limit 优化(分页)

  • 在数据量比较大时,如果进行limit分页查询,在查询时,越往后,分页查询效率越低。

  • 在进行分页查询时,如果执行limit 2000000,10 ,此时需要MySQL排序前2000010 条记录,仅仅返回 2000000 - 2000010的记录,其他记录丢弃,查询排序的代价非常大

优化思路: 一般分页查询时,通过创建 覆盖索引 能够比较好地提高性能,可以通过覆盖索引加子查询(多表联查)形式进行优化

在这里插入图片描述

六、count 优化

  • count() 是一个聚合函数:对于返回的结果集,一行行地判断,如果 count 函数的参数不是 NULL,累计值就加 1,否则不加,最后返回累计值。

用法:

  • count(*)
  • count(主键)
  • count(字段)
  • count(数字)

在这里插入图片描述

七、update 优化

在这里插入图片描述

InnoDB 的行锁是针对索引加的锁,不是针对记录加的锁。并且该索引不能失效,否则会从行锁升级为表锁

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/629555.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

chatgpt赋能python:Python怎么五个一行输出?

Python怎么五个一行输出? 在Python中,实现五个一行输出并不难,只需要使用循环语句即可。下面,我们将介绍如何使用Python实现五个一行输出。 实现方法 首先,我们需要定义一个包含一定数量元素的列表或字符串。然后&a…

chatgpt赋能python:Python中如何生成随机浮点数?

Python中如何生成随机浮点数? 随机数在计算机编程中常常使用,而在Python中,我们可以使用内置的random模块来产生随机数。不同于整数随机数,如果想要产生浮点数的随机数,我们就需要进行一些额外的操作。 产生浮点数类…

Baumer工业相机堡盟工业相机如何使用BGAPISDK控制相机数据流的开启和关闭(C++)

Baumer工业相机堡盟工业相机如何使用BGAPISDK控制相机数据流的开启和关闭(C) Baumer工业相机Baumer工业相机BGAPI SDK的技术背景Baumer工业相机使用BGAPISDK控制相机数据流的方式1.引用合适的类文件2.使用BGAPISDK控制相机数据流的方式2.使用BGAPISDK控制…

Pascal Voc 2007 2012

1、简介 PASCAL 全称:Pattern Analysis, Statical Modeling and Computational Learning PASCAL VOC(The PASCAL Visual Object Classes )是一个经典的计算机视觉数据集,由牛津大学、马里兰大学和微软剑桥研究院的研究人员创建的…

HiveSQL初级题目

文章目录 Hive SQL题库(初级)第一章 环境准备1.1 建表语句1.2 数据准备1.3 插入数据 第二章 简单查询2.1 查找特定条件2.1.1 查询姓名中带“冰”的学生名单2.1.2 查询姓“王”老师的个数2.1.3 检索课程编号为“04”且分数小于60的学生的课程信息,结果按分数降序排列…

chatgpt赋能python:Python如何保存文件到文件夹?

Python如何保存文件到文件夹? Python是一种高级编程语言,广泛应用于数据科学、网络编程、自动化任务等领域。其中,保存文件到文件夹是Python编程中的重要功能。本文将介绍Python如何保存文件到文件夹的方法,包括如何创建文件夹和…

动态网站JSP技术

文章目录 零、本节学习目标一、JSP概述(一)什么是JSP1、JSP的概念2、JSP的特征(二)编写第一个JSP1、创建Web项目2、修改Artifact名称,重新部署项目3、创建欢迎JSP页面4、启动服务器,查看结果 二、JSP基本语…

chatgpt赋能python:Python怎么产生方波?

Python怎么产生方波? 随着科技的发展,数字信号处理在各个领域都有广泛的应用,产生方波是其中一个基础的信号处理技术。在Python中,可以通过一些简单的代码来产生方波信号。本文将介绍如何使用Python产生方波。 什么是方波信号&a…

牛客小白赛复盘] 牛客小白月赛74

[牛客小白赛复盘] 牛客小白月赛74 总结A 简单的整除1. 题目描述2. 思路分析3. 代码实现 B 整数划分1. 题目描述2. 思路分析3. 代码实现 C 传送阵1. 题目描述2. 思路分析3. 代码实现 D 修改后的和1. 题目描述2. 思路分析3. 代码实现 E 幼稚园的树21. 题目描述2. 思路分析3. 代码…

一分钟学一个 Linux 命令 - tar

前言 大家好,我是 god23bin。今天给大家带来的是 Linux 命令系列,每天只需一分钟,记住一个 Linux 命令不成问题。今天,我们要介绍的是一个常用且强大的命令:tar。 什么是 tar 命令? tar 是 tape archive…

C语言经典题目(三)

C站的小伙伴们,大家好呀!😊😊✨✨这一篇是C语言之经典题目篇,除程序设计,还有一些不错的程序分析,快来和我一起进入C语言的世界吧!✨✨✨ 💕C语言其他刷题篇在这里哦&…

【Python程序设计】——重点题目(期末不挂科)

课本: 目录 🕒 1. 控制结构🕒 2. 数据类型🕒 3. 函数🕒 4. 文件操作🕒 5. 面向对象🕒 6. Excel操作🕒 7. 实验课题目合集🕒 8. 思政题 🕒 1. 控制结构 【例…

chatgpt赋能python:Python怎么二次安装?

Python怎么二次安装? 介绍 Python作为一种广泛应用的编程语言,其安装也是极其简单。只需要在Python官网上下载对应版本的安装包,并按照提示进行安装即可。但是,如果你需要二次安装Python,比如更新到新的版本或者将Py…

百度、头条、360、搜狗下拉拓词及长尾关键词挖掘-批量多线程

百度、头条、360、搜狗下拉拓词及长尾关键词挖掘软件介绍: 1、在如今竞争激烈的互联网时代,作为SEO站长,我们都知道一个事实:流量就是金钱!而要想在海量信息中脱颖而出,我们需要借助一些强大的工具来帮助我…

OpenMMLab-AI实战营第二期——4-1.目标检测与MMDetection

文章目录 1. 目标检测的基本范式1.0-1 目标检测简介1.0-2 基本概念1.1 滑窗1.1.1 滑窗基本思想1.1.2 滑窗效率问题改进1.1.3 感受野计算 1.2-1 使用卷积实现密集预测1.2.1 在特征图上进行密集预测1.2.2 边界框回归1.2.3 非极大值抑制(Non-Maximum Suppression&#…

chatgpt赋能python:Python入门:如何下载和安装JupyterNotebook

Python入门:如何下载和安装Jupyter Notebook Jupyter Notebook是Python编程必备的工具之一,它可以帮助你快速地编写和测试Python代码。在这篇文章中,我们将向你展示如何下载和安装Jupyter Notebook。如果你是一名Python入门者,这…

神经网络:CNN中的filter,kernel_size,strides,padding对输出形状的影响

输入数据在经过卷积层后,形状一般会发生改变,而形状的变化往往与以下四个超参数有关。 1,filter(out_channel) 该超参数控制着输入数据经过卷积层中需要与几个卷积核进行运算,而输入数据与每个卷积核进行…

【P57】JMeter 保存响应到文件(Save Responses to a file)

文章目录 一、保存响应到文件(Save Responses to a file)参数说明二、准备工作三、测试计划设计 一、保存响应到文件(Save Responses to a file)参数说明 可以将结果树保存到文件 使用场景:当结果太大,使…

Mybatis插件001分页 pagehelper

Mybatis-PageHelper/Important.md at master pagehelper/Mybatis-PageHelper GitHubMybatis通用分页插件. Contribute to pagehelper/Mybatis-PageHelper development by creating an account on GitHub.https://github.com/pagehelper/Mybatis-PageHelper/blob/master/wikis…

短视频社区的商业化和流量分发

商业化本质上是一门流量生意,那么为什么要做流量? 1、流量分配影响社区生态 一个社区的总流量是要在三类流量里面做分配,此消彼长: 私域流量公域流量(中心化运营 算法推荐)商业化的流量(也是…