IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 大数据 -> Redis事务、锁、数据删除策略 -> 正文阅读

[大数据]Redis事务、锁、数据删除策略

Redis事务

Redis事务作为一个命令执行的队列,将一系列的预处理的命令包装成为一个整体,当执行时按照添加顺序依次执行,中间不会被打断或干扰。采用multi、exec、discard进行事务的处理。

  • multi:设定事务的开启位置,此指令执行后,后续所有指令均加入到事务中。

  • exec:设定事务的结束位置,同时执行事务。

  • discard:终止当前事务的定义,发生在multi之后,exec之前。

    注意:加入事务的命令暂时进入到任务队列中,并没有立即执行,只有执行exec命令才开始执行队列中的任务

在定义事务的过程中,对于语法错误的(命令单词错误),整个事务中所有的命令均不执行,包括那些语法正确的命令。但如果原本是string类型的数据,采用操作队列的命令去执行,这时能够正确运行的命令会执行,运行错误的命令不会被执行,也就是说事务中某个命令出现错误,但是并不会对已执行命令对应的数据自动回滚,即Redis单条指令是支持原子性的,但是多条Redis指令合并的一个事务不支持原子性。

注意:已经执行完毕的命令对应的数据不会自动回滚,需要程序实现回滚。

Redis锁

只是监听某个或多个key的状态,如果发生改变,则不执行事务里面的操作。

  • watch key1 key2······:对key添加监视锁,在执行exec前如果key发生变化,就终止事务执行。该命令须在开启事务multi命令之前执行。
  • unwatch:取消对所有key的监视。

Redis分布式锁

后续记录 -

Redis的数据删除策略(过期数据)

针对设置数据的自动过期时间,Redis提供了两种数据删除策略:

  • 惰性删除

    数据到达过期时间,不做处理,等待下次访问该数据时,判断该数据是否过期,如果未过期,则返回数据,如果过期则删除,返回不存在。由于是在使用该数据时才删除过期数据,节省CPU性能,但是内存压力比较大,出现长期占用内存的过期数据。

  • 定期删除

    周期性轮询Redis库中的时效性数据,采用随机抽取的策略,利用过期数据占比的方式控制删除频率。定期删除占用CPU性能有设置峰值,检测频率可以自定义设置,内存压力不是很大,长期赵勇内存的冷数据会被持续清理。

    • Redis启动服务器初始化时,读取配置server.hz的值,默认为10
    • 每秒执行server.hz次serverCron()方法
    • serverCron()方法调用databasesCron()方法轮询数据库
    • databasesCron()方法调用activeExpireCycle()方法对每个expires[*]逐一进行检测,每次执行250ms/server.hz
    • 对每个expires[*]检测时,随机挑选N个key检测,如果key超时,则删除key,如果一轮中删除的key的数量>N*25%时循环该过程,如果一轮中删除key的数量<=N*25%时则检查下一个expires[*],N取值为active_expire_cycle_lookups_per_loop属性的值
    • 参数current_db用于记录activeExpireCycle()进入到那个expires[*]执行,如果activeExpireCycle()执行时间到期,下次从current_db继续向下执行

Redis的数据删除策略(内存不足)

我们都知道Redis使用内存存储数据,在执行每一个命令前,会调用freeMemoryIfNeeded()检测内存是否充足,如果内存不满足新加入数据的最低储存要求,Redis要临时删除一些数据为当前指令清理存储空间,这称为逐出算法。逐出数据的过程不是一定能够清理出足够的可使用的内存空间,如果不成功则反复执行,当对所有数据尝试完毕后,如果内存还是没有达到内存清理的要求,将会抛出错误信息。

  • maxmemory:redis使用最大的物理内存比例。默认值为0,表示不限制

  • maxmemory-samples:每次选取待删除数据的个数。选取数据时并不会全库扫描,导致严重的性能损耗,降低读写性能,采用随机获取数据的方式作为待检测删除数据

  • maxmemory-policy:删除数据的策略。达到最大内存后,对被挑选出来的数据进行删除的策略。

    删除策略:

    • 检测易失数据(可能会过期的数据)
      • volatile-lru:挑选最长时间未使用的数据淘汰
      • volatile-lfu:挑选规定时间内使用次数最少的数据淘汰
      • volatile-ttl:挑选将要过期的数据淘汰
      • volatile-random:任意选择数据淘汰
    • 检测全库数据
      • allkeys-lru:挑选最长时间未使用的数据淘汰
      • allkeys-lfu:挑选最近一段时间使用次数最少的数据淘汰
      • alljeys-random:任意选择数据淘汰
    • 放弃数据驱逐
      • no-enviction:禁止驱逐数据,会引发错误OOM(4.0版本中默认策略)

    **注意:**在配置数据逐出策略时,可通过info命令输出监控信息,查询缓存hits和miss的次数,根据实际需求配置策略。
    在这里插入图片描述

  大数据 最新文章
实现Kafka至少消费一次
亚马逊云科技:还在苦于ETL?Zero ETL的时代
初探MapReduce
【SpringBoot框架篇】32.基于注解+redis实现
Elasticsearch:如何减少 Elasticsearch 集
Go redis操作
Redis面试题
专题五 Redis高并发场景
基于GBase8s和Calcite的多数据源查询
Redis——底层数据结构原理
上一篇文章      下一篇文章      查看所有文章
加:2021-09-13 09:20:26  更:2021-09-13 09:22:46 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/23 20:00:34-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码