Redis持久化机制——随记2
创始人
2025-05-29 05:21:32
0

引言

Redis官方提供了两种不同的持久化方法来将数据存储到硬盘里面分别是:
(1)快照(Snapshot)
(2)AOF (Append Only File)只追加日志文件

1、快照机制

1.1、特点

这种方式可以将某一时刻的所有数据都写入硬盘中,当然这也是redis的默认开启持久化方式,保存的文件是以.rab形式结尾的文件,因此这种方式也称之为RDB方式。
在这里插入图片描述

1.2、快照生成方式

(1)客户端方式:BGSAVE和SAVE指令
(2)服务器配置自动触发

1.客户端方式之BGSAVE

a.客户端可以使用BGSAVE命令来创建一 个快照,当接收到客户端的BGSAVE命令时,redis会调用fork 1来创建一 个子进程, 然后子进程负责将快照写入磁盘中,而父进程则继续处理命令请求。
名词解释: fork当一个进程创建子进程的时候,底层的操作系统会创建该进程的一个副本,在类unix系统中创建子进程的操作会进行优
化:在刚开始的时候,父子进程共享相同内存,直到父进程或子进程对内存进行了写之后,对被写入的内存的共享才会结束服务。
在这里插入图片描述

2.客户端方式之SAVE

b.客户端还可以使用SAVE命令来创建一 个快照,接收到SAVE命令的redis服务器在快照创建完毕之前将不再响应任何其他的命令。
在这里插入图片描述
注意:SAVE命令并不常使用,使用SAVE命令在快照创建完毕之前,redis处于阻塞状态,无法对外服务。

3.服务器配置方式之满足配置自动触发

一如果用户在redis . conf中设置了save配置选项,redis会在save选项条件满足之后自动触发一次BGSAVE命令 ,如果设置多个save配置选项,当任意一个save配置 选项条件满足, redis也会触发一次BGSAVE命令。
在这里插入图片描述

4.服务器接收客户端shutdown指令

一当redis通过shutdown指令 接收到关闭服务器的请求时,会执行一次save命令,阻塞所有的客户端,不再执行客户端执行发送的任何命令,并且在save命令执行完毕之后关闭服务器

1.3、配置生成快照名称和位置

1.修改生成快照名称
-dbfilename dump.rdb
2.修改生成位置

  • dir ./
    在这里插入图片描述

2、AFO只追加日志文件机制

2.1、特点

这种方式可以将客户端执行的写命令记录到日志文件中,AOF持久化会将被执行的写命令写到AOF的文件末尾,以此来记录数据发生的变化,因此只要redis从头到尾执行一次AOF文件所包含的所有写命令,就可以恢复AOF文件的记录的数据集。
在这里插入图片描述

2.2、开启AOF持久化

在redis的默认配置中AOF持久化机制是没有开启的,需要在配置中开启。

1.开启AOF持久化

  • a.修改appendonly yes开启持久化。
  • b.修改appendfilename " appendonly. aof" 指定生成文件名称。
    在这里插入图片描述

2.3、日志追加频率

1.always [谨慎使用]

一说明:每个redis写命令都要同步写入硬盘,严重降低redis速度。
一解释:如果用户使用了always选项,那么每个redis写命令都会被写入硬盘,从而将发生系统崩溃时出现的数据丢失减到最少;遗憾的。
是,因为这种同步策略需要对硬盘进行大量的写入操作,所以redis处理命令的速度会受到硬盘性能的限制;
一注意:转盘式硬盘在这种频率下200左右个命令/s ;固态硬盘(SSD)几百万个命令/s;
一警告:使用SSD用户请谨慎使用always选项,这种模式不断写入少量数据的做法有可能会引发严重的写入放大问题,导致将固态硬盘的寿命从原来的几年降低为几个月。

2.everysec [推荐]

一说明:每秒执行一次同步显式的将多个写命令同步到磁盘。
一解释:为了兼顾数据安全和写入性能,用户可以考虑使用everysec选项,让redis每秒一 次的频率对A0F文件进行同步; redis每秒同步一次AOF文件时性能和不使用任何持久化特性时的性能相差无几,而通过每秒同步-一次AOF文件, redis可以保证,即使系统崩溃,用户最多丢失一秒之内产生的数据。

3.no[不推荐]

一说明:由操作系统决定何时同步
一解释:最后使用no选项,将完全有操作系统决定什么时候同步AOF日志文件,这个选项不会对redis性能带来影响但是系统崩溃时,会丢失不定数量的数据,另外如果用户硬盘处理写入操作不够快的话,当缓冲区被等待写入硬盘数据填满时,redis会处于阻塞状态,并导致redis的处理命令请求的速度变慢。

2.4、修改日志同步频率

1.修改日志同步频率

—修改appendfsync everysec| always |no指定
在这里插入图片描述

3、 AOF文件的重写

3.1、 AOF带来的问题

AOF的方式也同时带来了另一个问题。持久化文件会变的越来越大。例如我们调用incr test命令100次,文件中必须保存全部的100条命令,其实有99条都是多余的。因为要恢复数据库的状态其实文件中保存一条set test 100就够了。为了压缩aof的持久化文件Redis提供了AOF重写机制。

3.2、 AOF重写

用来在一定程度上减小AOF文件的体积

1.客户端方式触发重写

—执行BGREWRITEAOF命令 不会阻塞redis的服务

3.3、服务器配置方式自动触发

—配置redis . conf中的auto-aof- rewrite- percentage选项 参加下图↓↓↓
—如果设置auto-aof-rewrite-percentage值为100和auto- aof-rewrite-min-size 64mb ,并且启用的AOF持久化时,那么当AOF文件体积大于64M,并且AOF文件的体积比上一次重写之后体积大了至少-倍(100%)时,会自动触发,如果重写过于频繁,用户可以考虑将auto-aof-rewrite-percentage设置为更大。
在这里插入图片描述

3.4、重写原理

注意:重写aof文件的操作,并没有读取旧的aof文件,而是将整个内存中的数据库内容用命令的方式重写了一个新的aof文件,替换原有的文件这点和快照有点类似。

1 重写流程

  • 1.redis调用fork ,现在有父子两个进程子进程根据内存中的数据库快照,往临时文件中写入重建数据库状态的命令
  • 2.父进程继续处理client请求,除了把写命令写入到原来的aof文件中。同时把收到的写命令缓存起来。这样就能保证如果子进程重写
    失败的话并不会出问题。
  • 3.当子进程把快照内容写入已命令方式写到临时文件中后,子进程发信号通知父进程。然后父进程把缓存的写命令也写入到临时文件。
  • 4.现在父进程可以使用临时文件替换老的aof文件,并重命名,后面收到的写命令也开始往新的aof文件中追加。
    在这里插入图片描述

4、持久化总结

两种持久化方案既可以同时使用(aof),又可以单独使用,在某种情况下也可以都不使用,具体使用那种持久化方案取决于用户的数据和应用决定。
无论使用AOF还是快照机制持久化,将数据持久化到硬盘都是有必要的,除了持久化外,用户还应该对持久化的文件进行备份(最好备份在多个不同地方)。

相关内容

热门资讯

linux入门---制作进度条 了解缓冲区 我们首先来看看下面的操作: 我们首先创建了一个文件并在这个文件里面添加了...
C++ 机房预约系统(六):学... 8、 学生模块 8.1 学生子菜单、登录和注销 实现步骤: 在Student.cpp的...
JAVA多线程知识整理 Java多线程基础 线程的创建和启动 继承Thread类来创建并启动 自定义Thread类的子类&#...
【洛谷 P1090】[NOIP... [NOIP2004 提高组] 合并果子 / [USACO06NOV] Fence Repair G ...
国民技术LPUART介绍 低功耗通用异步接收器(LPUART) 简介 低功耗通用异步收发器...
城乡供水一体化平台-助力乡村振... 城乡供水一体化管理系统建设方案 城乡供水一体化管理系统是运用云计算、大数据等信息化手段࿰...
程序的循环结构和random库...   第三个参数就是步长     引入文件时记得指明字符格式,否则读入不了 ...
中国版ChatGPT在哪些方面... 目录 一、中国巨大的市场需求 二、中国企业加速创新 三、中国的人工智能发展 四、企业愿景的推进 五、...
报名开启 | 共赴一场 Flu... 2023 年 1 月 25 日,Flutter Forward 大会在肯尼亚首都内罗毕...
汇编00-MASM 和 Vis... Qt源码解析 索引 汇编逆向--- MASM 和 Visual Studio入门 前提知识ÿ...
【简陋Web应用3】实现人脸比... 文章目录🍉 前情提要🌷 效果演示🥝 实现过程1. u...
前缀和与对数器与二分法 1. 前缀和 假设有一个数组,我们想大量频繁的去访问L到R这个区间的和,...
windows安装JDK步骤 一、 下载JDK安装包 下载地址:https://www.oracle.com/jav...
分治法实现合并排序(归并排序)... 🎊【数据结构与算法】专题正在持续更新中,各种数据结构的创建原理与运用✨...
在linux上安装配置node... 目录前言1,关于nodejs2,配置环境变量3,总结 前言...
Linux学习之端口、网络协议... 端口:设备与外界通讯交流的出口 网络协议:   网络协议是指计算机通信网...
Linux内核进程管理并发同步... 并发同步并发 是指在某一时间段内能够处理多个任务的能力,而 并行 是指同一时间能够处理...
opencv学习-HOG LO... 目录1. HOG(Histogram of Oriented Gradients,方向梯度直方图)1...
EEG微状态的功能意义 导读大脑的瞬时全局功能状态反映在其电场结构上。聚类分析方法一致地提取了四种头表面脑电场结构ÿ...
【Unity 手写PBR】Bu... 写在前面 前期积累: GAMES101作业7提高-实现微表面模型你需要了解的知识 【技...