【Redis】键值对数据库实现

news2025/5/14 1:36:00

目录

  • 1、背景
  • 2、五种基本数据类型对应底层实现
  • 3、redis数据结构

1、背景

redis是一个(key-value)键值对数据库,其中value可以是五大基本数据类型:string、list、hash、set、zset,这五大基本数据类型对应着不同的底层结构,接下来就来讲解一下redis如何存储这些数据类型的。

2、五种基本数据类型对应底层实现

redis数据结构旧版本(≤3.0)底层实现新版本(≥3.2+)底层实现说明
string简单动态字符串(SDS)简单动态字符串(SDS)SDS是二进制安全的动态字符串,支持高效追加和预分配
list双向链表(LinkedList)或压缩列表(Ziplist)快速列表(Quicklist)新版本统一用Quicklist(双向链表 + Ziplist的混合结构),平衡内存和访问效率
hash压缩列表(Ziplist)或哈希表(Hashtable)Ziplist或Hashtable,优化阈值新版本调整了Ziplist转hashtable的阈值(如hash-max-ziplist-entries等配置)
set整数集合(Intset)或哈希表(Hashtable)Intset或Hashable,优化阈值新版本优化了Intset的升级策略(如元素类型超出int16时自动转Hashtable)
zset压缩列表(Ziplist)或跳跃表(SkipList)+ 哈希表Ziplist或SkipList + Hashtable新版本调整了Ziplist转SkipList的阈值(如zset-max-ziplist-entries)

关键变化说明如下:
1、List的优化

旧版本:大列表用LinkedList(内存碎片多),小列表用Ziplist(节省内存但修改效率低)。
新版本:统一用Quicklist(双向链表节点内嵌Ziplist),兼顾内存和操作效率。

2、Hash/Set/ZSet的阈值调整

新版本通过配置参数优化了Ziplist和Intset的转换条件,减少内存浪费。

3、String保持不变

始终使用SDS,但新版本可能优化了内存分配策略(如惰性释放)。

3、redis数据结构

redis数据结构如下(6.2.18版本),所有键值对都存储在其中:

typedef struct redisDb {
    dict *dict; //存储当前数据库的所有键值对
    dict *expires; //存储所有设置了过期时间的键及过期时间戳
    dict *blocking_keys; //记录因阻塞操作(如BLPOP)被阻塞的客户端及其监听的键
    dict *ready_keys; //暂存已收到数据且准备解除阻塞的键(如LPUSH触发的BLPOP唤醒)
    dict *watched_keys; //实现事务的WATCH机制(乐观锁),记录被监视的键及关联的客户端
    int id; //当前数据库的编号(如0-15,默认16个库)
    long long avg_ttl; //统计当前数据库键的平均TTL(毫秒),用于INFO命令展示
    unsigned long expires_cursor; //记录渐进式过期检查的游标(避免长时间阻塞)
    list *defrag_later; //存储待内存碎片整理的键名列表(逐步整理,避免阻塞主线程)
} redisDb;

核心存储结构为dict *dict,dict结构体组成为:

typedef struct dict {
    dictType *type; //定义字典操作的函数指针(如哈函数、键比较函数)
    void *privdata; //存储字典的私有数据,传递给type中的函数
    dictht ht[2]; //存储实际数据的哈希表,ht[0]是主哈希,ht[1]仅在rehash时使用
    long rehashidx; //标记rehash的进度(-1表示为进行rehash,≥0表示当前rehash的桶索引)
    int16_t pauserehash; //控制rehash的暂停状态(>0暂停,=0正常,<0表示错误)
} dict;

核心存储结构为两个哈希表dictht ht[2],哈希表dictht的结构为:

typedef struct dictht {
    dictEntry **table; //存储实际键值对数据的哈希桶数组,每个元素是链表头指针(解决哈希冲突)
    unsigned long size; //哈希表的大小(桶的总数量)
    unsigned long sizemask; //哈希掩码,用于计算键的索引
    unsigned long used; //当前哈希表中已使用的节点数量(所有链表的节点总数)
} dictht;

核心存储结构dictEntry **table里存放了哈希表数组,dictEntry 结构如下:

typedef struct dictEntry {
    void *key; //存储键的指针(实际指向redis的字符串对象)
    union {
        void *val; //指向redis对象的指针(如string、list、hash等复杂类型)
        uint64_t u64; //直接存储整数值(避免额外内存分配)
        int64_t s64; //直接存储有符号整数值(如时间戳)
        double d; //直接存储浮点数值
    } v;
    struct dictEntry *next; //指向下一个dictEntry节点(形成链表,解决哈希冲突)
} dictEntry;

void *key和void *val分别指向了实际的键对象和值对象robj,robj结构如下:

typedef struct redisObject {
    unsigned type:4; //标识redis对象的类型(如string、list、hash等)
    unsigned encoding:4; //表示底层实现的编码方式
    unsigned lru:LRU_BITS; //记录对象的访问时间或频率(用于内存淘汰策略)
    int refcount; //引用计数(实现内存回收垃圾回收机制)
    void *ptr; //指向实际存储数据的底层结构(如SDS、ziplist、dict等)
} robj;

void *ptr存储真正的数据,unsigned type:4为reids数据类型,其定义如下:

#define OBJ_STRING 0    /* String object. */
#define OBJ_LIST 1      /* List object. */
#define OBJ_SET 2       /* Set object. */
#define OBJ_ZSET 3      /* Sorted set object. */
#define OBJ_HASH 4      /* Hash object. */

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2375035.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

网址为 http://xxx:xxxx/的网页可能暂时无法连接,或者它已永久性地移动到了新网址

这是由于浏览器默认的非安全端口所导致的&#xff0c;所谓非安全端口&#xff0c;就是浏览器出于安全问题&#xff0c;会禁止一些网络浏览向外的端口。 避免使用6000,6666这样的端口 6000-7000有很多都不行&#xff0c;所以尽量避免使用这个区间 还有在云服务器中&#xff0c…

鸿蒙跨平台开发教程之Uniapp布局基础

前两天的文章内容对uniapp开发鸿蒙应用做了一些详细的介绍&#xff0c;包括配置开发环境和项目结构目录解读&#xff0c;今天我们正式开始写代码。 入门新的开发语言往往从Hello World开始&#xff0c;Uniapp的初始化项目中已经写好了一个简单的demo&#xff0c;这里就不再赘述…

uniapp使用npm下载

uniapp的项目在使用HBuilder X创建时是不会有node_modules文件夹的&#xff0c;如下图所示&#xff1a; 但是uni-app不管基于哪个框架&#xff0c;它内部一定是有node.js的&#xff0c;否则没有办法去实现框架层面的一些东西&#xff0c;只是说它略微有点差异。具体差异表现在…

C# 的异步任务中, 如何暂停, 继续,停止任务

namespace taskTest {using System;using System.Threading;using System.Threading.Tasks;public class MyService{private Task? workTask;private readonly SemaphoreSlim semaphore new SemaphoreSlim(0, 1); // 初始为 0&#xff0c;Start() 启动时手动放行private read…

2025年AI工程师认证深度解析:AAIA认证体系全景指南与实战策略

一、IAAAI认证体系演进与价值定位 1.1 国际人工智能认证发展现状 全球人工智能认证市场呈现显著分化态势。据Gartner 2025Q1报告显示&#xff0c;北美市场以IEEE/ACM双认证体系为主导&#xff08;市占率38%&#xff09;&#xff0c;欧盟区推行AI Act合规认证&#xff08;强制…

统计服务器CPU、内存、磁盘、网络IO、队列、数据库占用空间等等信息

文章目录 一、背景二、说明三、页面四、代码 前端 MonitorServiceProcessPage.vueMonitorServiceProcessTable.vueMonitorServiceProcessTableButton.vueaddMonitorTask.vueproductOperation.vueshowMonitorTask.vueMonitorSystemLog.vueMonitorTask.vueMonitorTaskLog.vueReal…

-MAC桢-

MAC桢和IP的关系&#xff1a; 主机A想跨网络和B通信需要IP地址进行路由选择&#xff0c;但一个局域网&#xff0c;比如路由器进行路由选择之前&#xff0c;首先要将数据包发送给路由器B&#xff0c;也就是局域网通信也就是同一个网段的主机进行通信&#xff0c;所以必须通过mac…

安装:Kali2025+Docker

安装:Kali2025Docker Kali2025安装 直接官网下载WMware版本 https://www.kali.org/get-kali/#kali-virtual-machines 直接打开运行 初始用户密码 kali/kali sudo -i 命令切换到root 更换镜像 切换到其他可用的 Kali Linux 镜像源可能会解决问题,可以使用国内的镜像源&…

Linux云计算训练营笔记day04[Rocky Linux中的命令:mv、cp、grep(^$)、tar、重定向>和>>]

mv 移动(剪切) 源数据会消失 格式: mv 源文件 目标路径 touch /opt/a.txt 创建文件 mv /opt/a.txt /root 移动文件&#xff0c;没有改名 mkdir gongli 创建目录 mv gongli /opt/ 移动目录&#xff0c;没有改名 mv /opt/gongli tedu 移动目录&#xff0c;改名了 …

AbMole Olaparib:打破常规,用PARP抑制重塑肿瘤研究

在当今的生物医学研究领域&#xff0c;Olaparib&#xff08;AZD2281&#xff0c;AbMole&#xff0c;M1664&#xff09;作为一种重要的PARP&#xff08;聚腺苷二磷酸核糖聚合酶&#xff09;抑制剂&#xff0c;受到了广泛关注。Olaparib可干扰 DNA 单链断裂的修复&#xff0c;从而…

Windows重置网络,刷新缓存

同时按键盘上的【Windows】键和【S】键&#xff0c;弹出搜索框&#xff0c;输入 命令提示符 在“最佳匹配”下的【命令提示符】上右键&#xff0c;点击【以管理员身份运行】 1弹出一个窗口&#xff0c;在光标闪烁的位置&#xff0c;直接输入【netsh winsock reset】&#xff0…

OpenHarmony平台驱动开发(十),MMC

OpenHarmony平台驱动开发&#xff08;十&#xff09; MMC 概述 功能简介 MMC&#xff08;MultiMedia Card&#xff09;即多媒体卡&#xff0c;是一种用于固态非易失性存储的小体积大容量的快闪存储卡。 MMC后续泛指一个接口协定&#xff08;一种卡式&#xff09;&#xff0…

解决IDEA无法运行git的问题

之前git一直没有问题&#xff0c;今天打开就提示我安装git&#xff0c;自然用git去提交新项目也会遇到问题。 我出现问题的原因是&#xff1a;git路径缺失 文件->设置->git 发现git的路径为空&#xff0c;按照实际位置填写即可

HTTP 响应状态码总结

一、引言 HTTP 响应状态码是超文本传输协议&#xff08;HTTP&#xff09;中服务器对客户端&#xff08;通常是 Web 浏览器&#xff09;请求的响应指示。这些状态码是三位数字代码&#xff0c;用于告知客户端请求的结果&#xff0c;包括请求是否成功。响应被分为五个类别&#…

【Qt】Qt 构建系统详解:qmake 入门到项目实战

Qt 构建系统详解&#xff1a;qmake 入门到项目实战 本文将系统介绍 Qt 构建工具 qmake 的用法&#xff0c;并通过一个完整的项目结构示例&#xff0c;帮助你掌握 .pro 文件编写、子项目管理、模块依赖等核心技能。 &#x1f9ed; 一、什么是 qmake&#xff1f; qmake 是 Qt 提…

《Zabbix Proxy分布式监控实战:从安装到配置全解析》

注意&#xff1a;实验所需的zabbix服务器的搭建可参考博客 zabbix 的docker安装_docker安装zabbix-CSDN博客 1.1 实验介绍 1.1.1 实验目的 本实验旨在搭建一个基于Zabbix的监控系统&#xff0c;通过安装和配置Zabbix Proxy、MySQL数据库以及Zabbix Agent&#xff0c;实现分…

华为配置篇-RSTP/MSTP实验

MSTP 一、简介二、常用命令总结三、实验 一、简介 RSTP&#xff08;快速生成树协议&#xff09;​ RSTP&#xff08;Rapid Spanning Tree Protocol&#xff09;是 STP 的改进版本&#xff0c;基于 ​​IEEE 802.1w 标准​​&#xff0c;核心目标是解决传统 STP 收敛速度慢的问…

git如何将本地 dev 分支与远程 dev 分支同步

要让本地 dev 分支与远程 dev 分支完全同步&#xff08;丢弃本地多余的提交记录&#xff09;&#xff0c;可以按照以下步骤操作&#xff1a; 1. ​​获取远程最新状态​ git fetch origin dev # 拉取远程 dev 分支的最新提交&#xff0c;但不会修改本地代码 IDEA中点击fetc…

Unity基础学习(九)输入系统全解析:鼠标、键盘与轴控制

目录 一、Input类 1. 鼠标输入 2. 键盘输入 3. 默认轴输入 &#xff08;1&#xff09; 基础参数 &#xff08;2&#xff09;按键绑定参数 &#xff08;3&#xff09;输入响应参数 &#xff08;4&#xff09;输入类型与设备参数 &#xff08;5&#xff09;不同类型轴的参…

QT:获取软件界面窗口的尺寸大小2025.5.8

在Windows系统中&#xff0c;获取软件界面窗口的尺寸大小可以通过多种方法实现&#xff0c;以下是基于不同场景的详细解决方案&#xff1a; 方法1&#xff1a;使用Windows API获取窗口尺寸 适用于获取外部应用程序窗口的尺寸&#xff08;如记事本、计算器等&#xff09;。 步…