IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 大数据 -> Redis(8)----RDB持久化 -> 正文阅读

[大数据]Redis(8)----RDB持久化

1,前言

Redis是内存数据库,数据库状态存储在内存中,为了进行数据持久化,需要将这些数据保存在磁盘中。因此Redis提供了RDB持久化功能。

RDB持久化既可以手动执行,也可以根据服务器配置选项定期执行,该功能可以将某个时间点上的数据库状态保存到一个RDB文件中。

在这里插入图片描述

RDB持久化所生成的RDB文件是一个二进制文件,通过该文件还可以还原生成RDB文件时的数据库状态

2,RDB持久化

2.1,RDB文件的创建与载入

有两个命令可以用于生成RDB文件,一个是SAVE,另一个是BGSAVE

两者的区别在于:

  • SAVE命令会阻塞Redis服务器进程,直到RDB文件创建完毕,在阻塞期间,服务器不能处理任何命令请求
  • BGSAVE命令会派生出一个子进程,由子进程负责创建RDB文件,服务器进程(父进程)继续处理请求

SAVEBGSAVE命令如下:

def SAVE():
	# 创建RDB文件
	rdbSave()

def BGSAVE():
	# 创建子进程
	pid=fork()
	
    # 如果是子进程
    if pid==0:
		# 子进程负责创建RDB文件
		rdbSave()
            
        # 完成之后向父进程发送信号
        signal_parent()
    
    # 如果是父进程
    else pid>0:
		# 父进程继续处理命令请求,并通过轮询等待子进程的信号
		handle_request_and_wait_signal()
         
    else:
		# 处理出错情况
		handle_fork_error()

SAVEBGSAVE命令是负责创建RDB文件的,至于载入RDB文件,Redis并没有提供命令,只要Redis服务器在启动时检测到RDB文件存在,就会自动载入

值得一提的是,由于AOF文件的更新频率会比RDB文件的更新频率高(越高代表着数据丢失的越少),所以:

  • 如果服务器开启了AOF持久化功能,那么服务器会优先使用AOF文件来还原数据
  • 只有在AOF持久化功能处于关闭状态时,服务器才会使用RDB文件进行还原

在这里插入图片描述

BGSAVE命令执行时的服务器状态

BGSAVE命令执行期间,服务器处理SAVE、BGSAVE、BGREWRITEAOF三个命令的方式会和平时有所不同

  • 执行BGSAVE时,客户端发送的SAVE命令会被拒绝,是因为避免父进程(服务器进程)和子进程同时执行两个rdbSave(),为了防止产生竞争条件
  • BGSAVE命令期间,客户端发送的BGSAVE命令会被服务器拒绝,因为同时执行两个BGSAVE命令也会产生竞争条件
  • BGREWRITEAOFBGSAVE两个命令不能同时执行:
    • 如果BGSAVE正在执行,那么客户端发送的BGREWRITEAOF命令会被延迟到BGSAVE执行完毕后执行
    • 如果BGREWRITEAOF正在执行,那么客户端发送的BGSAVE命令会被服务器拒绝

因为BGREWIRTEAOFBGSAVE两个命令的执行实际工作都由子进程执行,所以这两个命令在操作方面并没有什么冲突的地方,之所以不允许同时执行只是一个性能方面的考虑

2.2,自动间隔性保存

用户可以通过save选项设置多个保存条件,只要其中任意一个条件被满足,服务器就会执行BGSAVE命令

例如向服务器提供以下配置:

save 900 1 # 服务器在900秒内,对数据库进行了至少1次修改
save 300 10 # 服务器在300秒内,对数据库进行了至少10次修改
save 60 10000 # 服务器在60秒内,对数据库进行了至少10000次修改

服务器会根据save选项所设置的保存条件,设置服务器状态redisServer结构的saveparams属性:

struct redisServer{
    //...
    
    //记录了保存条件的数组
    struct saveparams *saveparams;
    
    //...
    
    //修改计数器
    long long dirty;
    
    //上一次执行保存的时间
    time_t lastsave;
    
    //...
}

saveparams属性是一个数组,数组中的每一个元素都是saveparam结构,每个saveparam结构都保存了一个save选项设置的保存条件:

struct saveparam{
    
    //秒数
    time_t seconds;
    
    //修改数
    int changes;
    
}

那么redisServer是怎么保存上面的save设置的条件?

在这里插入图片描述

dirty计数器和lastsave属性

除了saveparams属性,服务器状态还维持着一个dirty计数器,以及一个lastsave属性:

  • dirty计数器记录了距离上一次成功执行SAVE命令或者BGSAVE命令之后,服务器对数据库进行了多少次修改(增删改)
  • lastsave属性是一个UNIX时间戳,记录了服务器上一次成功执行SAVE命令或者BGSAVE命令的时间

假设有这么一个服务器状态:

在这里插入图片描述

  • dirty为123表示服务器在上次保存之后,对数据库状态执行了123次修改
  • lastsave属性则记录了服务器上次执行保存操作的时间为:1378270800(也就是:2013年9月4日零时)

检查保存条件是否满足

Redis的服务器周期性操作函数serverCron默认每隔100毫秒执行一次,该函数用于对正在执行的服务器进行维护,其中一项工作就是检查save选项所设置的保存条件是否已经满足。如果满足就执行BGSAVE命令。相关伪代码如下:

def serverCron():
	#...

	# 遍历所有保存条件
	for saveparam in server.saveparams:
	
		# 计算距离上次执行保存操作有多少秒
		save_interval = unixtime_now() - server.lastsave
            
        # 如果数据库状态的修改次数超过条件设置的次数
        # 并且距离上次保存的时间超过条件设置的时间
        # 那么执行保存操作
		if server.dirty >= saveparam.changes and save_interval > saveparam.seconds:
			BGSAVE()
                
        # ...

程序会遍历并检查saveparams数组中的所有保存条件,只要有任意一个条件被满足,那么服务器就会执行BGSAVE命令

例如服务器状态如当前所示:

在这里插入图片描述

那么当过了300秒后(也就是当前时间戳为:1378271101),服务器将自动执行一次BGSAVE命令,因为saveparams数组的第二个保存条件:300秒内有至少10次修改,已经被满足。

执行一次BGSAVE之后,假设执行时间为5秒,那么执行后的服务器状态应为:

在这里插入图片描述

可以看到,修改计数器已经被重置为0了

未完待续……

  大数据 最新文章
实现Kafka至少消费一次
亚马逊云科技:还在苦于ETL?Zero ETL的时代
初探MapReduce
【SpringBoot框架篇】32.基于注解+redis实现
Elasticsearch:如何减少 Elasticsearch 集
Go redis操作
Redis面试题
专题五 Redis高并发场景
基于GBase8s和Calcite的多数据源查询
Redis——底层数据结构原理
上一篇文章      下一篇文章      查看所有文章
加:2022-07-04 22:59:49  更:2022-07-04 23:01:09 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年5日历 -2024/5/19 19:21:07-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码