目录
一、RedisInsight工具介绍
1、工具概述
2、关键特性
3、版本与服务
4、实际应用
二、Redis Data Reveal工具介绍
1、简介
2、主要特性
3、使用方法
4、注意事项
5、总结
三、Redis Memory Analyzer (RMA)工具介绍
1、工具概述
2、技术特点
3、应用场景
4、安装与使用
5、结果分析
6、总结
四、shell脚本统计指定前缀key的数量
参考资料
一、RedisInsight工具介绍
RedisInsight是一款Redis官方开源的可视化管理工具，旨在帮助开发人员和管理员更轻松地设计、开发和优化Redis应用程序。以下是关于RedisInsight的详细介绍：
1、工具概述
- 定义：RedisInsight是一个直观且高效的Redis GUI（图形用户界面）管理工具。
- 功能：提供对Redis数据的查询、分析以及与Redis数据库的交互功能。
- 开发者：由Redis Labs开发，并作为Redis的官方可视化工具推出。
2、关键特性
- 可视化界面：RedisInsight提供了直观的用户界面，以图形方式展示key-value对、数据结构等信息，使用户能够更轻松地查看和管理Redis数据。
- 监控和指标：允许用户监控Redis服务器的关键性能指标，如内存使用情况、每秒执行的命令数、延迟等。这有助于用户及时发现潜在的性能问题并进行优化。
- 实时命令和日志：提供实时的命令执行信息和日志查看功能，有助于用户进行故障排除和调试。
- 数据探索：用户可以通过GUI界面方便地查看数据结构、进行搜索、排序和筛选等操作，以便更好地探索Redis数据。
- 键空间分析：提供对Redis数据集中键分布的分析功能，帮助用户了解数据分布情况，从而更有效地管理数据。
- 备份和恢复：支持对Redis数据进行备份，并在需要时进行恢复，确保数据的安全性和可靠性。
- 安全性：提供身份验证和授权机制，确保Redis实例的安全性。用户可以设置访问控制和管理用户角色。
- 跨平台支持：支持多种操作系统，包括Windows、macOS和Linux，使其适用于广泛的用户群体。
3、版本与服务
- 版本选择：RedisInsight提供免费的社区版和一个付费的企业版。免费版具有基本功能，而付费版则提供更多高级功能和支持服务。
- 支持服务：除了基本的可视化管理功能外，RedisInsight还支持RediSearch、RedisJSON、RedisGraph、RedisTimeSeries、RedisAI等插件的命令自动完成，为用户提供了更丰富的功能和操作体验。
4、实际应用
RedisInsight作为一款强大的Redis可视化工具，已经广泛应用于各种场景，如缓存管理、实时数据处理、消息队列等。通过RedisInsight，用户可以更直观地管理和优化Redis数据库，提高应用程序的性能和可靠性。
综上所述，RedisInsight作为一款功能强大的Redis可视化工具，凭借其直观的用户界面、丰富的功能特性和跨平台支持等优势，已成为Redis开发和管理的重要工具之一。
二、Redis Data Reveal工具介绍
GitHub - xueqiu/rdr
Redis Data Reveal（简称RDR）是一款用于分析和可视化Redis数据库中每个key占用的内存空间的工具。以下是关于Redis Data Reveal的详细介绍：
1、简介
Redis Data Reveal（RDR）是雪球公司基于redis-rdb-tool开源项目开发的一款可视化中间件，旨在帮助开发者更直观地查看和分析Redis数据库中各个key的内存占用情况。
2、主要特性
- 可视化界面：RDR提供了图形化的用户界面，方便用户查看Redis数据库中各个key的内存占用情况。
- 内存占用分析：RDR能够分析Redis数据库中的每个key的内存占用，并生成详细的报表，帮助用户快速定位占用内存较大的key。
- 性能优化：通过RDR的分析报告，用户可以了解Redis数据库的内存使用情况，从而进行相应的优化，如删除不必要的key、调整数据结构等。
- 多平台支持：RDR支持Windows、Linux等多个操作系统平台，方便用户在不同环境中使用。
3、使用方法
- 下载与安装：用户可以从GitHub等渠道下载RDR的安装包，并按照说明进行安装。
- 配置：安装完成后，用户需要配置RDR以连接到Redis数据库。这包括设置Redis的主机名、端口号、密码等连接信息。
- 分析：配置完成后，用户可以运行RDR进行分析。RDR会读取Redis数据库的RDB文件，并生成内存占用报表。
- 查看报表：用户可以通过RDR提供的Web界面查看生成的报表。报表中包含了各个key的内存占用情况、数据类型等信息。
4、注意事项
- 备份数据：在使用RDR进行分析之前，建议先备份Redis数据库的数据，以防万一。
- 权限问题：在配置RDR时，需要确保用户具有足够的权限来读取Redis数据库的RDB文件。
- 版本兼容性：不同的Redis版本可能具有不同的RDB文件格式。请确保RDR的版本与Redis的版本兼容。
5、总结
Redis Data Reveal（RDR）是一款功能强大的Redis内存分析工具，通过图形化的用户界面和详细的内存占用报表，帮助用户更好地了解Redis数据库的内存使用情况，从而进行相应的优化和调整。无论是开发者还是系统管理员，都可以从RDR中受益。
三、Redis Memory Analyzer (RMA)工具介绍
GitHub - gamenet/redis-memory-analyzer: Redis memory profiler to find the RAM bottlenecks throw scaning key space in real time and aggregate RAM usage statistic by patterns.
Redis Memory Analyzer（RMA）是一款用于分析Redis内存使用的强大工具。以下是关于RMA工具的详细介绍：
1、工具概述
RMA是一个命令行工具，能够实时扫描Redis键空间，并按照键模式聚合内存使用统计数据。它无需在生产环境中进行维护，可以针对所有或选定的Redis数据类型（如“字符串”、“哈希”、“列表”、“集合”和“有序集合”）进行扫描，帮助用户识别和分析内存占用最高的数据。
2、技术特点
- 高效数据处理流程：
- 使用Lua脚本批量加载匹配模式的键及其类型。
- 根据类型和模式对键进行分组。
- 应用不同行为策略，如全局统计、扫描器模式或内存相关输出。
- 输出格式化的结果，支持文本和JSON格式。
- 灵活性与可扩展性：
- 通过
--match选项限制匹配模式，减少扫描量，适用于大型数据库。 - 使用
--types指定要包括的Redis类型，进一步细化分析。 - 提供了全球视图、扫描器模式和内存视图三种工作模式，满足不同的分析需求。
- 通过
- 深入内部分析：
- 深入到Redis内部数据结构，如ziplist和embstr编码，揭示内存使用的细节。
- 易于集成：
- 输出为JSON或文本格式，方便与其他工具结合使用。
3、应用场景
- 运维监控：实时监测Redis实例的内存使用情况，找出消耗内存最多的键和数据类型。
- 性能优化：通过识别存储结构（如哈希、列表等）的分布，优化数据模型，降低内存占用。
- 系统排查：新接手大型项目时，快速了解数据库中存储的关键信息和数据结构。
4、安装与使用
RMA项目基于Python 3.5及以上版本和redis-py库作为依赖。安装简单快捷，可以通过pip直接从PyPI或源代码仓库获取。使用参数如--server（Redis服务器主机名）、--port（Redis服务器端口）等进行配置和扫描。
4.1 安装 rma
pip3 install rma
# 从源安装
pip3 install git+https://github.com/gamenet/redis-memory-analyzer@v0.2.0
设置国内源加速下载
# 设置阿里源
pip config set global.index-url https://mirrors.aliyun.com/pypi/simple/
# 查看源设置
pip config list
global.index-url='https://mirrors.aliyun.com/pypi/simple/'
# 更新pip
pip3 install --upgrade pip
# 安装rma
pip3 install rma
4.2 参数讲解
usage: rma [-h] [-s HOST] [-p PORT] [-a PASSWORD] [-d DB] [-m MATCH] [-l LIMIT]
[-b BEHAVIOUR] [-t TYPES] [-f FORMAT] [-x SEPARATOR]
RMA is used to scan Redis key space in and aggregate memory usage statistic by
key patterns.
optional arguments:
-h, --help 显示此帮助信息并退出
-s, --server HOST Redis 服务器主机名。 默认为 127.0.0.1
-p, --port PORT Redis 服务器端口。 默认为 6379
-a, --password PASSWORD 连接到服务器时使用的密码
-d, --db DB 数据库编号，默认为 0
-m, --match MATCH 要匹配的键模式,支持正则通配符
-l, --limit LIMIT 获取模式匹配的最大键,设置显示多少条
-b, --behaviour BEHAVIOUR 指定应用程序工作模式。 允许值:all, scanner, ram, global ,默认为 all
-t, --type TYPES 要包含的数据类型。 可能的值是string，hash, list, set。
可以提供多种类型。 如果未指定，将返回所有数据类型。
允许的值为 string、hash、list、set、zset
-f, --format FORMAT 输出类型格式：json 或 text（默认）
-x, --separator SEPARATOR 指定Key分隔符。 默认为":"
5、结果分析
RMA运行的结果表格有两个突出的特点：
- 每一个key前缀的用户空间占比。
- 每一个key前缀的查询次数占比。
这些详细的数据可以帮助用户更好地理解和优化Redis的内存使用。
6、总结
Redis Memory Analyzer（RMA）是一个功能强大、易于使用的Redis内存分析工具。无论您是DevOps还是开发者，都值得尝试RMA来优化Redis管理效率。通过RMA，您可以深入了解Redis的内存使用情况，发现潜在的问题并进行优化，从而提高Redis的性能和稳定性。
四、shell脚本统计指定前缀key的数量
#!/bin/bash
# 检查参数数量是否正确
if [ $# -ne 4 ]; then
echo "Usage: $0 <redis_host> <redis_port> <redis_password> <pattern>"
exit 1
fi
REDIS_HOST="$1"
REDIS_PORT="$2"
REDIS_PASSWORD="$3"
PATTERN="$4"
# 安全地传递 Redis 密码
REDIS_CLI="redis-cli -h $REDIS_HOST -p $REDIS_PORT"
if [ -n "$REDIS_PASSWORD" ]; then
REDIS_CLI+=" -a $REDIS_PASSWORD"
fi
SCAN_CURSOR="0"
TOTAL_KEYS=0
while [ "$SCAN_CURSOR" != "0" ]; do
# 执行 SCAN 命令，使用传入的正则表达式模式和 COUNT=10000
SCAN_RESULT=$($REDIS_CLI SCAN $SCAN_CURSOR MATCH "$PATTERN" COUNT 10000)
# 检查 SCAN 命令执行是否成功
if [ $? -ne 0 ]; then
echo "Error: Failed to execute SCAN command."
exit 1
fi
# 解析 SCAN 结果
SCAN_CURSOR=$(echo "$SCAN_RESULT" | head -n 1)
KEYS=$(echo "$SCAN_RESULT" | tail -n +2 | tr -s ' ' '\n')
# 计算本次扫描获得的键的数量
NUM_KEYS=$(echo "$KEYS" | wc -l)
TOTAL_KEYS=$((TOTAL_KEYS + NUM_KEYS))
echo "本次扫描获得 $NUM_KEYS 个符合条件的键，起始游标为 $SCAN_CURSOR"
done
echo "总共找到符合条件的键的数量为: $TOTAL_KEYS"
参考资料
RedisInsight中文版mac redis insight 免费_mob64ca1401b651的技术博客_51CTO博客
GitHub - xueqiu/rdr
如何使用Redis Data Reveal（rdr）查看redis中每个key占用的内存大小_redis内存告警查看key-CSDN博客
通过 Redis Data Reveal（rdr）分析redis中每个key所占的内存_redis database reveal-CSDN博客
一次Redis内存满的问题以及工具使用-腾讯云开发者社区-腾讯云
六大免费的Redis内存分析工具_redis rdb分析工具-CSDN博客
GitHub - gamenet/redis-memory-analyzer: Redis memory profiler to find the RAM bottlenecks throw scaning key space in real time and aggregate RAM usage statistic by patterns.
redis 内存分析工具 RMA 使用_redis rma-CSDN博客
