【Sql Server】使用row_number over方式进行表分页,数据量达到五千多条记录后,查询变慢需要20多秒的解决方案

news2024/10/1 5:31:28

大家好,我是全栈小5,欢迎来到《小5讲堂》。
这是《Sql Server》系列文章,每篇文章将以博主理解的角度展开讲解。
温馨提示:博主能力有限,理解水平有限,若有不对之处望指正!

在这里插入图片描述

目录

  • 前言
  • 单字段查询
  • 多字段查询
  • 知识点
    • 基本语法
    • 分页查询示例
      • 示例 SQL 查询
    • 解释
    • 注意事项
  • 文章推荐

前言

最近创建了一张表,用于保存名称相关信息。
刚开始是没有加任何索引,数据不多时查询也没什么问题。
等到了表有5千多条记录后,查询变得很慢,设置需要二十多秒。
一起来看下这个博主是如何解决的?或者你们是否有更好的解决方案呢?也欢迎评论区留言。

单字段查询

刚开始给status字段设置索引,没效果。
直接再给time字段添加索引,有效果,查询秒出。

设置索引是占用一定物理空间大小,所以用物理空间大小还速度
1)单字段索引(适合单个字段排序或查询)
2)多字段索引(适合多个字段排序或查询)

【单字段查询】

-- CREATE INDEX time_index ON 目标表 (time) -- 设置表字段索引
select count(1) from 目标表

 select * 
 from (
     select row_number() 
     over(order by t.time) as rowindex,t.* 
     from (
         select * from 目标表 where status=10
     ) t
 ) new_table
 where rowindex>((1-1)*10) and rowindex<=1*10;

温馨提示:当你的表数据很多的时候,不建议在可视化工具进行索引设置。可通过sql语句的方式

CREATE INDEX 索引名 ON 目标表 (字段1,字段2.。。)

多字段查询

【多字段查询】
支持模糊查询,字段status和name字段组合索引,查询秒出

where status=10 and name like’%张%’

 select * 
 from (
     select row_number() 
     over(order by t.time) as rowindex,t.* 
     from (
         select * from 目标表 where status=10 and name like'%张%'
     ) t
 ) new_table
 where rowindex>((1-1)*10) and rowindex<=1*10;

知识点

在 SQL Server 中,ROW_NUMBER() 函数用于为结果集中的每一行分配一个唯一的顺序号。这是一个非常有用的函数,尤其是在分页查询中。以下是有关 ROW_NUMBER() 函数的一些基本说明:

基本语法

ROW_NUMBER() OVER (PARTITION BY partition_expression ORDER BY order_expression) AS row_number
  • PARTITION BY partition_expression:可选项,用于将数据分成不同的组。对于每个组,ROW_NUMBER() 函数将重新开始计数。如果不使用 PARTITION BY,则对整个结果集应用计数。
  • ORDER BY order_expression:指定排序的列,ROW_NUMBER() 函数将根据这个排序规则分配行号。

分页查询示例

假设我们有一个员工表 Employees,包含以下字段:EmployeeID, Name, 和 Salary。我们希望对这个表进行分页查询,每页显示 10 条记录,且按薪资降序排序。可以使用 ROW_NUMBER() 函数来实现这一点。

示例 SQL 查询

WITH EmployeeRank AS (
    SELECT 
        EmployeeID,
        Name,
        Salary,
        ROW_NUMBER() OVER (ORDER BY Salary DESC) AS RowNum
    FROM Employees
)
SELECT 
    EmployeeID,
    Name,
    Salary
FROM EmployeeRank
WHERE RowNum BETWEEN 11 AND 20;

解释

  1. CTE(公共表表达式)定义:我们创建了一个名为 EmployeeRank 的 CTE,其中包含 ROW_NUMBER() 函数来为每一行分配一个行号。排序规则是按 Salary 列降序排列。

  2. 分页查询:在外部查询中,我们通过 WHERE RowNum BETWEEN 11 AND 20 来提取第 2 页的数据(假设每页 10 条记录)。你可以根据需要调整 BETWEEN 的范围来获取不同页的数据。

注意事项

  • 性能:使用 ROW_NUMBER() 函数可能对性能有一定影响,尤其是在处理大型数据集时。确保对排序列进行适当的索引,以优化性能。

  • 偏移量和限制:在 SQL Server 2012 及以后的版本中,可以使用 OFFSET-FETCH 子句实现分页查询,这通常更简洁,也可以提高性能。示例如下:

    SELECT 
        EmployeeID,
        Name,
        Salary
    FROM Employees
    ORDER BY Salary DESC
    OFFSET 10 ROWS FETCH NEXT 10 ROWS ONLY;
    

    这个查询从第 11 行开始,取接下来的 10 行记录。OFFSETFETCH 是 SQL Server 2012 引入的分页功能,更加直观且高效。

文章推荐

【Sql Server】使用row_number over方式进行表分页,数据量达到五千多条记录后,查询变慢需要20多秒的解决方案

【Sql Server】随机查询一条表记录,并重重温回顾下自定义函数的封装和使用

【Sql Server】锁表如何解锁,模拟会话事务方式锁定一个表然后进行解锁

【Sql Server】通过Sql语句批量处理数据,使用变量且遍历数据进行逻辑处理

【新星计划回顾】第六篇学习计划-通过自定义函数和存储过程模拟MD5数据

【新星计划回顾】第四篇学习计划-自定义函数、存储过程、随机值知识点

【Sql Server】Update中的From语句,以及常见更新操作方式

【Sql server】假设有三个字段a,b,c 以a和b分组,如何查询a和b唯一,但是c不同的记录

【Sql Server】新手一分钟看懂在已有表基础上修改字段默认值和数据类型

总结:温故而知新,不同阶段重温知识点,会有不一样的认识和理解,博主将巩固一遍知识点,并以实践方式和大家分享,若能有所帮助和收获,这将是博主最大的创作动力和荣幸。也期待认识更多优秀新老博主。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2065977.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

缓存出海方案

优质博文&#xff1a;IT-BLOG-CN 一、挑战/注意事项 【1】框架组不允许在不同地区部署的独立Redis实例拥有相同的名称&#xff0c;因此不同地区需要使用不用的Redis集群名称。 【2】分布式锁问题&#xff1a; 该场景需要保证key与UCS灰度策略是可以同步的&#xff0c;即同一…

从《黑神话:悟空》爆火看中国游戏行业的崛起

近年来&#xff0c;中国游戏行业经历了前所未有的快速发展与变革&#xff0c;而《黑神话:悟空》的爆火更是成为了这一进程中的标志性事件。这款游戏不仅在国内市场引起了巨大轰动&#xff0c;也在全球范围内赢得了广泛关注与赞誉&#xff0c;其成功背后折射出中国游戏行业在技术…

住宅代理和移动代理的全面比较:提高隐私和效率的最佳选择

近年来随着网络的发展&#xff0c;我们在网络上的行为越来越透明化。网络隐私和数据安全已经成为企业和个人用户不可忽视的一部分&#xff0c;如何提高我们的网络访问安全指数是一个值得商讨的问题。当下&#xff0c;代理技术在提高网络效率方面发挥了重要作用。本文将深入探讨…

redis面试(十八)RedLock加锁原理

什么是redLock RedLock算法思想&#xff0c;不只在一个redis实例上创建锁&#xff0c;是在多个redis实例上创建锁&#xff0c;n / 2 1&#xff0c;必须在大多数redis节点上都成功创建锁&#xff0c;才能算这个整体的RedLock加锁成功&#xff0c;避免说仅仅在一个redis实例上加…

uni-app01

工具:HuilderX noed版本:node-v17.3.1 npm版本:8.3.0 淘宝镜像:https://registry.npmmirror.com/ 未安装nodejs可以进入这里https://blog.csdn.net/a1241436267/article/details/141326585?spm1001.2014.3001.5501 目录 1.项目搭建​编辑 2.项目结构 3.使用浏览器运行…

【数据结构】总结二叉树的概念以及存储结构

目录 1. 树的概念及结构 1.1 树的名词定义 1.2 树的表示 2. 二叉树的概念及结构 2.1 二叉树的概念 2.2 特殊的二叉树 2.2.1 满二叉树 2.2.2 完全二叉树 2.3 二叉树的存储结构 2.3.1 顺序存储 2.3.2 链式存储 3. 选择题 1. 树的概念及结构 1.1 树的名词定义 1. 节…

基于x86 平台opencv的图像采集和seetaface6的口罩人脸检测识别功能

目录 一、概述二、环境要求2.1 硬件环境2.2 软件环境三、开发流程3.1 编写测试3.2 配置资源文件3.2 验证功能一、概述 本文档是针对x86 平台opencv的图像采集和seetaface6的口罩人脸检测识别功能,opencv通过摄像头采集视频图像,将采集的视频图像送给seetaface6的口罩人脸检测…

Docusign 电子签名的合法性指南【中国】

电子签名法律概述 中华人民共和国&#xff08;“中国”&#xff09;于2004年颁布了《电子签名法》&#xff08;“电子签名法”&#xff09;&#xff0c;并于2015年和2019年进行了重大修订。电子签名法规定&#xff0c;只要当事人同意采用电子签名形式&#xff0c;文件的法律效…

基于重要性加权的LLM自我改进:考虑分布偏移的新框架

LLM自我改进的典型范式是在自生成数据上训练LLM,但是其中的部分数据可能有害,所以应该被过滤掉。但是目前的工作主要采用基于答案正确性的过滤策略,在这篇论文中,证明过滤掉正确但具有高分布偏移程度(DSE)的样本也可以有利于自我改进的结果。 论文的主要贡献如下: 提出了一个…

高并发集群饿了么后端的登录模块

高并发集群饿了么后端的登录模块 1.数据库 非交互式python&#xff1a; 非交互式: 2.数据库的负载均衡&#xff1a;阿里巴巴的mycat 修改配置文件 /usr/local/mycat/conf/server.xml :对外的账号 密码 数据库 /usr/local/mycat/conf/schema.xml 如果出现启动异常&…

搭建自己的金融数据源和量化分析平台(七):定时更新上市公司所属行业门类及大类

0x00 前言 由于此前从深交所下载的股票信息中只有行业门类信息&#xff0c;没有行业大类信息&#xff0c;导致后续解析三大报表和量化选股的时候无法进行&#xff1a; 可以看到深交所的股票是没有大类信息的。 再看看上交所的保险股&#xff1a; 因此需要将深交所股票的所属…

关于 IoTDB 的疑问,我们这次有奖征集!

新的社区活动来啦&#xff01; 你是否对 IoTDB 的技术/操作还有疑问&#xff0c;并需要得到原厂研发团队的解答&#xff1f; 你是否希望在踊跃提出疑问的同时&#xff0c;收获一份精美小礼物&#xff1f; 为回馈新老朋友对 Apache IoTDB 开源社区的活跃贡献&#xff0c;最新社区…

数据结构day01(数据结构、算法基础知识)

目录 【1】数据结构基础知识 1》什么是数据结构 2》数据 3》逻辑结构 1>线性关系 2>层次关系 3>网状关系 4》存储结构 1>顺序存储 2>链式存储 3>索引存储结构 4>散列存储 5》操作 【2】算法基础知识 1> 什么是算法 2> 算法设计 3> 算…

8金收官!仿真工程师为你揭秘中国跳水梦之队的“水花消失术”

巴黎奥运会上&#xff0c;中国跳水梦之队再一次上演“水花消失术”&#xff0c;不仅赢得了裁判的高分&#xff0c;也令全球观众惊叹不已。 发挥出色的运动员入水如同“牛奶入水”&#xff0c;顺滑得仿佛不带一丝涟漪&#xff1b;而发挥失误的运动员仿佛“炸鱼队”来袭&#xf…

.Net Linux平台下System.Drawing.Imaging替代方案

文章目录 前言一、ImageSharp库二、SkiaSharp库三、System.Drawing.Common库总结 前言 在.NET Standard中&#xff0c;System.Drawing.Imaging 命名空间并不直接支持&#xff0c;因为 System.Drawing 命名空间主要是为了Windows Forms&#xff08;WinForms&#xff09;和GDI设计…

FPGA第 5 篇,FPGA技术优略势,FPGA学习方向,FPGA学习路线,FPGA专业知识的学习方向(FPGA现场可编程门阵列学习路线和方向)

前言 前几篇讲了一下FPGA的发展和应用&#xff0c;以及未来前景。具体详细&#xff0c;请看 FPGA发展和应用&#xff0c;以及未来前景https://blog.csdn.net/weixin_65793170/category_12665249.html 这里我们来&#xff0c;记录一下&#xff0c;FPGA专业知识的学习路线 一.…

World of Warcraft [CLASSIC] the Eye of Eternity [EOE] P1-P2

World of Warcraft [CLASSIC] the Eye of Eternity [EOE] 永恒之眼&#xff08;蓝龙&#xff09; 第一阶段 第二阶段 第三阶段 载具1-6技能介绍 World of Warcraft [CLASSIC] the Eye of Eternity [EOE]_永恒之眼 eoe-CSDN博客 永恒之眼怎么出副本呢&#xff0c;战斗结束&am…

泛微E9如何更新缓存

泛微E9如何更新缓存 在E9中&#xff0c;是默认开启了数据缓存的&#xff0c;如果直接操作数据库是会存在缓存不更新的问题&#xff0c;E9系统提供以下几种方式进行缓存清空的方式。 注&#xff1a;原则上禁止通过非程序渠道直接修改OA数据库数据&#xff0c;可以直接在页面进行…

LCR 162. 数字 1 的个数 题解

189轮转数组 189. 轮转数组 给定一个整数数组 nums&#xff0c;将数组中的元素向右轮转 k 个位置&#xff0c;其中 k 是非负数。 时间复杂度o&#xff08;n&#xff09;&#xff0c;空间复杂度 o&#xff08;1&#xff09; class Solution {public void rotate(int[] nums, i…

Python 如何使用 functools 模块

functools 模块是 Python 标准库中的一个重要模块&#xff0c;它提供了一些有用的高阶函数和工具&#xff0c;帮助开发者更轻松地操作和处理函数。functools 中的工具主要用于函数的缓存、包装、偏函数等功能。 1. functools 模块概述 functools 模块的设计目的是为了简化和增…