Redis过期数据是否会被立马删除


Posted in Redis onJuly 23, 2022

引言

当 key 达到过期时间,Redis 就会马上删除么?

先说结论:并不会立马删除。

Redis 有两种删除过期数据的策略:

  • 定期选取部分数据删除;
  • 惰性删除;

该命令在 Redis 2.4 版本,过期时间并不是很精确,它可能在零到一秒之间。

从 Redis 2.6 开始,过期错误为 0 到 1 毫秒。

EXPIRE key seconds [ NX | XX | GT | LT]

 指令可以将指定的 key 设置过期时间,如果没有设置过期时间, key 将一直存在,除非我们明确将其删除,比如执行 DEL 指令。

所谓”狡兔死,走狗烹“,没用了就干掉,跟 35 岁就“毕业”是一个道理。

好慌……

从 Redis 版本 7.0.0 开始:EXPIRE 添加了选项:NXXXGTLT 选项。

  • NX:当 key 没有过期时才设置过期时间;
  • XX:只有 key 已过期的时候才设置过期时间;
  • GT:仅当新的到期时间大于当前到期时间时才设置过期时间;
  • LT:仅在新到期时间小于当前到期时间才设置到过期时间。

过期与持久化

主从或者集群架构中,两台机器的时钟严重不同步,会有什么问题么?

key 过期信息是用 Unix 绝对时间戳表示的。

为了让过期操作正常运行,机器之间的时间必须保证稳定同步,否则就会出现过期时间不准的情况。

比如两台时钟严重不同步的机器发生 RDB 传输, slave 的时间设置为未来的 2000 秒,假如在 master 的一个 key 设置 1000 秒存活,当 Slave 加载 RDB 的时候 key 就会认为该 key 过期(因为 slave 机器时间设置为未来的 2000 s),并不会等待 1000 s 才过期。

Redis过期数据是否会被立马删除

机器时钟不同步导致过期混乱

惰性删除

惰性删除很简单,就是当有客户端的请求查询该 key 的时候,检查下 key 是否过期,如果过期,则删除该 key

比如当 Redis 收到客户端的GET movie:小泽#玛……利亚.rmvb 请求,就会先检查 key = movie:小泽#玛……利亚.rmvb 是否已经过期,如果过期那就删除。

删除过期数据的主动权交给了每次访问请求。

该实现通过 expireIfNeeded函数实现,源码路径:src/db.c

int expireIfNeeded(redisDb *db, robj *key, int force_delete_expired) {
   // key 没有过期,return 0
    if (!keyIsExpired(db,key)) return 0;
    if (server.masterhost != NULL) {
        if (server.current_client == server.master) return 0;
        if (!force_delete_expired) return 1;
    }
    if (checkClientPauseTimeoutAndReturnIfPaused()) return 1;
    /* Delete the key */
    deleteExpiredKeyAndPropagate(db,key);
    return 1;
}

定期删除

仅仅靠客户端访问来判断 key 是否过期才执行删除肯定不够,因为有的 key 过期了,但未来再也没人访问,这些数据要怎么删除呢?

不能让这些数据「占着茅坑不拉屎」。

所谓定期删除,也就是 Redis 默认每 1 秒运行 10 次(每 100 ms 执行一次),每次随机抽取一些设置了过期时间的 key,检查是否过期,如果发现过期了就直接删除。

注意:并不是一次运行就检查所有的库,所有的键,而是随机检查一定数量的键。

具体步骤如下:

Redis过期数据是否会被立马删除

定时删除

  • 从所有设置了过期时间的 key 集合中随机选择 20 个 key;
  • 删除「步骤 1」发现的所有过期 key 数据;
  • 「步骤 2 」结束,过期的 key 超过 25%,则继续执行「步骤 1」。

删除的源码 expire.c 的 activeExpireCycle 函数实现。

这也就意味着在任何时候,过期 key 的最大数量等于每秒最大写入操作量除以 4。

为啥不检查所有设置过期时间的 key?

你想呀,假设 Redis 里存放了 100 w 个 key,都设置了过期时间,每隔 100 毫秒就检查 100 w 个 key,CPU 全浪费在检查过期 key 上了,Redis 也就废了。

注意了:不管是定时删除,还是惰性删除。当数据删除后,master 会生成删除的指令记录到 AOF 和 slave 节点。

码哥,如果过期的数据太多,定时删除无法删除完全(每次删除完过期的 key 还是超过 25%),同时这些 key 也再也不会被客户端请求,也就是无法走惰性删除,会怎样?

会不会导致 Redis 内存耗尽,怎么破?

这个问题问得好,答案是走内存淘汰机制。

以上就是Redis过期数据是否会被立马删除的详细内容,更多关于Redis过期数据的资料请关注三水点靠木其它相关文章!

Redis 相关文章推荐
redis通过6379端口无法连接服务器(redis-server.exe闪退)
May 08 Redis
Redis实现订单自动过期功能的示例代码
May 08 Redis
深入浅析Redis 集群伸缩原理
May 15 Redis
Windows下redis下载、redis安装及使用教程
Jun 02 Redis
Redis缓存-序列化对象存储乱码问题的解决
Jun 21 Redis
解析redis hash应用场景和常用命令
Aug 04 Redis
Redis入门教程详解
Aug 30 Redis
基于Redis的List实现特价商品列表功能
Aug 30 Redis
浅谈Redis 中的过期删除策略和内存淘汰机制
Apr 03 Redis
Grafana可视化监控系统结合SpringBoot使用
Apr 19 Redis
解决 redis 无法远程连接
May 15 Redis
Redis实战之Lettuce的使用技巧详解
Dec 24 Redis
如何使用注解方式实现 Redis 分布式锁
Jul 23 #Redis
redis lua限流算法实现示例
Redis Lua脚本实现ip限流示例
Jul 15 #Redis
redis protocol通信协议及使用详解
Jul 15 #Redis
Redis sentinel哨兵集群的实现步骤
Jul 15 #Redis
Redis唯一ID生成器的实现
Jul 07 #Redis
Redis+AOP+自定义注解实现限流
Jun 28 #Redis
You might like
php使用gzip压缩传输js和css文件的方法
2015/07/29 PHP
PHP文件下载实例代码浅析
2016/08/17 PHP
jquery 实现的全选和反选
2009/04/15 Javascript
JS Excel读取和写入操作(模板操作)实现代码
2010/04/11 Javascript
让ie运行js时提示允许阻止内容运行的解决方法
2010/10/24 Javascript
js中if语句的几种优化代码写法
2011/03/12 Javascript
jquery ajax例子返回值详解
2012/09/11 Javascript
javascript实现简单加载随机色方块
2015/12/25 Javascript
js中数组结合字符串实现查找(屏蔽广告判断url等)
2016/03/30 Javascript
react实现pure render时bind(this)隐患需注意!
2017/03/09 Javascript
GOJS+VUE实现流程图效果
2018/12/01 Javascript
jQuery 常用特效实例小结【显示与隐藏、淡入淡出、滑动、动画等】
2020/05/19 jQuery
vue 表单输入框不支持focus及blur事件的解决方案
2020/11/17 Vue.js
python实现简单的文字识别
2018/11/27 Python
django的ORM模型的实现原理
2019/03/04 Python
Django 表单模型选择框如何使用分组
2019/05/16 Python
python中自带的三个装饰器的实现
2019/11/08 Python
pytorch masked_fill报错的解决
2020/02/18 Python
python数据预处理 :数据抽样解析
2020/02/24 Python
python GUI库图形界面开发之PyQt5布局控件QGridLayout详细使用方法与实例
2020/03/06 Python
Python3之外部文件调用Django程序操作model等文件实现方式
2020/04/07 Python
pytorch掉坑记录:model.eval的作用说明
2020/06/23 Python
使用python操作lmdb对数据读取的实例
2020/12/11 Python
建筑施工实习自我鉴定
2013/09/19 职场文书
工程班组长岗位职责
2013/12/30 职场文书
办公室文员工作职责
2014/01/31 职场文书
《从现在开始》教学反思
2014/04/15 职场文书
庆六一开幕词
2015/01/29 职场文书
政协委员个人总结
2015/03/03 职场文书
物流仓管员岗位职责
2015/04/01 职场文书
2015年“7.11”世界人口日宣传活动方案
2015/05/06 职场文书
2016年小学生寒假家长评语
2015/10/10 职场文书
三好学生评选事迹材料(2016精选版)
2016/02/25 职场文书
血轮眼轮回眼特效 html+css
2021/03/31 HTML / CSS
漫画「古见同学有交流障碍症」第25卷封面公开
2022/03/21 日漫
数据分析数据库ClickHouse在大数据领域应用实践
2022/04/03 MySQL