Redis_BigKey

news2024/11/16 11:56:33

面试题

阿里广告平台,海量数据里查询某一固定前缀的key

小红书,你如何生厂上限值key */flushdb/flushall等危险命令以防止误删误用?

美团,MEMORY USAGE 命令你用过吗?

BigKey问题,多大算big?你如何发现?如何删除?如何处理?

BigKey你做过调优吗?惰性释放lazyfree了解过吗?

Morekey问题,生产上redis数据库有1000w记录,你如何遍历? key * 可以吗?

1.Morekey案例

大批量往redis里面插入2000w测试数据key

1.Linux Bash下面执行,插入100w

生成100W条redis批量设置kv的语句(key=kn,value=vn)写入到/tmp目录下的redisTest.txt文件

for((i=1;i<=100*10000;i++)); do echo "set k$i v$i" >> /tmp/redisTest.txt ;done;

[root@localhost ~]# for((i=1;i<100*10000;i++));do echo "set k$i v$i" >>/tmp/redisTest.txt;done;
[root@localhost ~]# 

通过redis提供的管道--pipe命令插入100W大批量数据

[root@localhost myredis]# cat /tmp/redisTest.txt | redis-cli --pipe
All data transferred. Waiting for the last reply...
Last reply received from server.
errors: 0, replies: 999999
[root@localhost myredis]# redis-cli
127.0.0.1:6379> dbsize
(integer) 999999
127.0.0.1:6379> 

某快递巨头真实生产案例新闻

 key * 你试试100W花费多少秒遍历查询

999991) "k935351"
999992) "k379644"
999993) "k906086"
999994) "k954027"
999995) "k538124"
999996) "k207347"
999997) "k543262"
999998) "k530837"
999999) "k229700"
(2.53s)
127.0.0.1:6379> 

Q:生产上怎么限制key */flushdb/flushall等危险命令以防止误删误用?

A:通过配置设置禁用这些命令,redis.conf在SECURITY这一项中

 不用key * 避免卡顿,那该用什么

scan命令登场----一句话,类似mysql limit但不完全相同

Scan命令用于迭代数据库中的数据库健


2. BigKey案例

2.1 多大算Big?

参考《阿里云Redis开发规范》

string和二级结构

1、string是value,最大512MB,但是大于等于10KB就是bigkey

2、list、hash、set、和zset,个数超过500就是bigkey


2.2 哪些危害

内存不均,集群迁移困难

超时删除,大key删除作梗

网络流量阻塞

2.3 如何产生

社交类: XXX粉丝列表,典型案例粉丝逐步增加

汇总统计: 某个报表,月日年经年累月的积累

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/410610.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

Spring5源码深度解析---Spring整体架构

概述 Spring是2003 年兴起的一个轻量级的Java 开发框架&#xff0c;从Rod Johnson著作中的部分理念和原型衍生而来。Spring是一个开放源代码的设计层面框架&#xff0c;为了解决企业应用开发的复杂性而创建。将面向接口的编程思想贯穿整个系统应用&#xff0c;使用基本的JavaB…

5分钟学会Ribbon负载均衡

文章目录一、Ribbon1.1 Ribbon的负载均衡流程&#xff1a;1.2 负载均衡策略1.2.1 内置的负载均衡策略1.2.2 如何修改负载均衡1.3 加载方式一、Ribbon 1.1 Ribbon的负载均衡流程&#xff1a; 获取可用的服务列表&#xff1a;客户端在进行服务调用之前&#xff0c;首先需要获取可…

浅谈人工智能在教育行业的应用

人工智能&#xff08;Artificial Intelligence, AI&#xff09;是当前最热门的技术领域之一&#xff0c;也是未来的发展趋势之一。人工智能可以用于各种领域&#xff0c;包括医疗、金融、交通、农业等。其中&#xff0c;人工智能在教育行业的应用也备受关注。本文将从人工智能在…

【无功优化】基于改进遗传算法的电力系统无功优化研究【IEEE30节点】(Matlab代码实现)

&#x1f4a5;&#x1f4a5;&#x1f49e;&#x1f49e;欢迎来到本博客❤️❤️&#x1f4a5;&#x1f4a5; &#x1f3c6;博主优势&#xff1a;&#x1f31e;&#x1f31e;&#x1f31e;博客内容尽量做到思维缜密&#xff0c;逻辑清晰&#xff0c;为了方便读者。 ⛳️座右铭&a…

【k8s完整实战教程1】源码管理-Coding

系列文章&#xff1a;这个系列已完结&#xff0c;如对您有帮助&#xff0c;求点赞收藏评论。 读者寄语&#xff1a;再小的帆&#xff0c;也能远航&#xff01; 【k8s完整实战教程0】前言【k8s完整实战教程1】源码管理-Coding【k8s完整实战教程2】腾讯云搭建k8s托管集群【k8s完…

计算机系统概论

提示&#xff1a;星河不问赶路人&#xff0c;岁月不负有心人 文章目录前言知识1.1 计算机的发展1.2 计算机硬件的基本组成1.3 计算机的性能指标前言知识 机器字长&#xff1a;计算机一次整数运算所能处理的二进制位数 .exe文件就是用机器语言描述的程序 1.1 计算机的发展 计…

LSPosed 安装教程(LSP框架安装教程)

1、下载LSPosed模块 CSDN下载&#xff1a; Riru 版&#xff1a;LSPosed-RiruZygisk版&#xff1a; LSPosed-Zygisk 或 github下载&#xff1a;LSPosed GitHub 2、打开Magisk – 设置 – 开启 Zygisk 3、打开面具 – 模块 – 从本地安装 4、重启设备&#xff0c;通知栏 点开&…

elasticsearch MySQL 数据同步。

elasticsearch & MySQL 数据同步。 文章目录elasticsearch & MySQL 数据同步。3. 数据同步。3.1. 思路分析。3.1.1. 同步调用。3.1.2. 异步通知。3.1.3. 监听 binlog。3.1.4. 选择。3.2. 实现数据同步。3.2.1. 思路。3.2.2. 导入 demo。3.2.3. 声明交换机、队列。1&…

Ansys Zemax | 模拟 AR 系统中的全息光波导:第二部分

AR 系统通常使用全息图将光耦合到波导中。本文展示了如何继续改进 本系列文章的第一部分 &#xff08;点击查看&#xff09;中建模的初步设计。&#xff08;联系我们获取文章附件&#xff09; 简介 AR 是一种允许屏幕上的虚拟世界与现实场景结合并交互的技术。 本文演示了如何…

如何学习计算机视觉?

AI的专业领域知识是指AI与具体应用领域相结合时所需要的该应用领域的知识。AI的应用领域非常广泛&#xff0c;例如计算机视觉、智能交通、智能制造、智慧金融、智慧教育、智慧农业、智慧能源、智能通信、智能芯片等。本文主要介绍计算机视觉的基本概念、发展历程、主要研究内容…

HMM-读书笔记

信息提取基础 MM 马卡洛夫链(Markov chain)是处理一类随机过程&#xff0c;这些过程包含最少量的内存&#xff0c;但实际上并不是无记忆的。下面&#xff0c;我们将处理离散随机变量和有限马尔可夫链。令 X1, X2, … , Xn, … 为随机变量序列&#xff0c;它们的值为同样有限字…

LeetCode 654 最大二叉树

题目&#xff1a; 给定一个不重复的整数数组 nums 。 最大二叉树 可以用下面的算法从 nums 递归地构建: 创建一个根节点&#xff0c;其值为nums中的最大值。 递归地在最大值左边的子数组前缀上构建左子树。 递归地在最大值右边的子数组后缀上构建右子树。 返回 nums 构建的最大…

VMware ESXi 8.0c Unlocker OEM BIOS 集成网卡驱动和 NVMe 驱动 (集成驱动版)

发布 ESXi 8.0 集成驱动版&#xff0c;在个人电脑上运行企业级工作负载 请访问原文链接&#xff1a;https://sysin.org/blog/vmware-esxi-8-sysin/&#xff0c;查看最新版。原创作品&#xff0c;转载请保留出处。 作者主页&#xff1a;sysin.org 发布 ESXi 8.0 集成驱动版&am…

在 Python 中计算两个数字之间的百分比

要计算两个数字之间的百分比&#xff0c;请将一个数字除以另一个数字&#xff0c;然后将结果乘以 100&#xff0c;例如 (30 / 75) * 100。这显示第一个数字占第二个数字的百分比。 在示例中&#xff0c;30 是 75 的 40%。 def is_what_percent_of(num_a, num_b):return (num_a…

论Sort()方法在 Python 和 Javascript 中应用的区别

Sort()方法相信大家都熟悉&#xff0c;用于排序&#xff0c;那就是数字从低到高&#xff08;默认&#xff09; 和 从高到低。以下对这个排序方法在Python 和 Java Script 中应用的区别作详细的举例说明。 在 Python中&#xff0c;例如有 lst1 : [1,5,8,6,2] &#xff0c;要对这…

html制作好看的个人简历(附源码)

文章目录1.设计来源1.1 主界面1.2 基本资料页面1.3 个人名言页面1.4 教育经历页面1.5 联系方式页面1.6 自我评价页面1.7 工作经历页面1.8 兴趣爱好页面1.9 沟通交流页面2.效果和源码2.1 动态效果2.2 源代码2.3 相关个人简历源码源码下载作者&#xff1a;xcLeigh 文章地址&#…

java课程设计(学生信息管理系统设计)+数据库

&#x1f50d; &#x1f50e; 本期带领大家一起来学习java课程设计&#xff08;学生信息管理系统设计&#xff09;数据库的实现思路 &#x1f50d; &#x1f50e; 文章目录题目要求数据库&#x1f30d;一 、环境搭建&#x1f30d;二 、功能实现 &#x1f30e; &#x1f30d;1.学…

重磅!阿里版本【ChatGPT】开放测评!

前两天突然爆出惊人消息&#xff1a;阿里版ChatGPT开放测评了&#xff01; 在本月初&#xff0c;已经有诸多关于阿里巴巴即将推出类似ChatGPT产品的传闻。 数日前&#xff0c;首批曝光的天猫精灵“鸟鸟分鸟”脱口秀版GPT基于大型模型的“精简版”&#xff0c;凭借其出色的表现吸…

2023-4-11-chrono库用法学习

&#x1f37f;*★,*:.☆(&#xffe3;▽&#xffe3;)/$:*.★* &#x1f37f;&#x1f4a5;&#x1f4a5;&#x1f4a5;欢迎来到&#x1f91e;汤姆&#x1f91e;的csdn博文&#x1f4a5;&#x1f4a5;&#x1f4a5;&#x1f49f;&#x1f49f;喜欢的朋友可以关注一下&#xff0…

4.9、字节序

4.9、字节序1.简介2.字节序举例3.判断电脑存储方式代码1.简介 现代 CPU 的累加器一次都能装载&#xff08;至少&#xff09;4 字节&#xff08;这里考虑 32 位机&#xff09;&#xff0c;即一个整数。那么这 4字节在内存中排列的顺序将影响它被累加器装载成的整数的值&#xff…