当前位置: 首页 > backend >正文

【Redis】压缩列表

目录

  • 1、背景
  • 2、压缩列表
    • 【1】底层结构
    • 【2】特性
    • 【3】优缺点

1、背景

ziplist(压缩列表)是redis中一种特殊编码的双向链表数据结构,主要用于存储小型列表和哈希表。它通过紧凑的内存布局和特殊的编码方式来节省内存空间。

2、压缩列表

【1】底层结构

ziplist并不是一个显式的c结构体,而是通过紧凑的字节数组来实现的。它没有传统的struct定义,而是通过内存布局和偏移量来管理数据,其结构如下:

//ziplist整体结构
<zlbytes> <zltail> <zllen> <entry> <entry> ... <entry> <zlend>

字段含义如下:

字段大小(字节)说明
zlbytes4整个ziplist占用的内存字节数(uint32_t)
zltail4最后一个entry的偏移量(uint32_t)
zllen2entry的数量(uint16_t),如果超过2^16-1,需要遍历整个ziplist才能获取准确数量
entry变长存储的实际数据项
zlend1固定值0xFF,表示ziplist结束

每个entry的存储方式如下:

<prevlen> <encoding> <entry-data>

字段含义如下:

字段大小说明
prevlen1或5字节前一个entry的长度(用于方向遍历)
encoding1、2或5字节当前entry的数据类型和长度
entry-data变长实际存储的数据

可以看到encoding和entry-data的长度是可变的,prevlen的编码规则如下:

1、如果前一个entry的长度 < 254字节,则prevlen占用1字节(直接存储长度值)。
2、如果前一个entry的长度 >= 254字节,则prevlen占用5字节(第一个字节是0xFE,后4字节存储实际长度)。

encoding的编码规则如下:

1、如果数据类型为整数,就使用1字节编码。
2、如果数据类型为字符串,就根据字符串长度大小使用1、2、5字节编码。

【2】特性

ziplist的特性如下:

特性描述
内存紧凑通过特殊编码减少内存使用
双向遍历支持从前往后和从后往前遍历
变长编码根据数据大小使用不同长度的编码
自动升级当数据超过阈值时会自动转换为其它结构
连续内存所有数据存储在连续内存块中
无指针使用偏移量而非指针,节省空间

【3】优缺点

ziplist的优缺点如下:

优点缺点
内存效率高,节省空间插入/删除操作可能导致连锁更新
缓存局部性好查找效率O(n),不适合大数据量
减少内存碎片修改操作可能需要重新分配内存
适合小数据量存储编码/解码需要额外CPU开销
自动转换机制最大长度有限制(默认64KB)
http://www.xdnf.cn/news/6490.html

相关文章:

  • 打破传统束缚:Captiks 无线惯性动捕与步态分析系统如何重新定义运动测量?
  • 【内含文档PPT】基于SSM框架的智能交通信息管理系统
  • day21-线性表(链表III)
  • 网络爬虫学习之httpx的使用
  • 函数专题1
  • 【大模型面试每日一题】Day 19:如何设计自动化评估框架验证大模型的多步推理能力(如数学解题)?
  • 使用Python与正则表达式高效提取Excel中的票号数据
  • 2.Klipper开发篇:Klipper上位机源码分析
  • 时源芯微|TSFE0806U-2L-900TF复合共模滤波器在USB端口保护
  • Python函数参数传递机制深度解析:值传递与引用传递的真相
  • 理解c++中关键字友元friend的作用
  • 盲盒:拆开未知的惊喜,收藏生活的仪式感
  • 现代生活中的创新健康养生之道
  • LLM笔记(二)LLM数据基础
  • 【C++】Module CPP:模块化编程 Demo
  • 【C#】Thread.Join()、异步等待和直接join
  • C++delete详解剖析
  • 工具类来生成蓝牙指令
  • Java 序列化(Serialization)
  • 奇妙协同效应,EtherNet IP与PROFINET网关优化半导体生产线
  • Git .gitattributes 文件用途详解
  • Baklib知识中台驱动智能服务新实践
  • ZCC6303x-60V/1.2MHz 高效率升压 LED 恒流驱动替代SY7301
  • 【图片识别工具】批量单据识别批量重命名,批量OCR识别图片文字并重命名,批量改名工具的使用步骤和注意事项
  • Modbus TCP转Profinet网关:数字化工厂异构网络融合的核心枢纽
  • pciutils-3.5.5-win64工具的使用方法
  • Java大师成长计划之第23天:Spring生态与微服务架构之服务发现与注册中心
  • 使用命令行拉取 Git 仓库
  • 数学复习笔记 9
  • 自学嵌入式 day 18 - 数据结构 1