Redis 实现持久化

Redis ⽀持 RDB ( 定期备份 ) 和 AOF ( 实时备份 ) 和 混合持久化 (结合RDB 和 AOF 的特点) 持久化机制,持久化功能有效地避免因进程退出造成数据丢失问题, 当下次重启时利⽤之前持久化的⽂件即可实现数据恢复。

RDB(Redis DataBase)

RDB 是一种快照备份机制,在指定的时间间隔内将内存中的数据集快照写入磁盘。

1. 手动触发

save:执行 save 的时候,redis 就会全力以赴的进行 " 快照生成 " 操作,此时就会阻塞 redis 的其他客户端的命令,直到进行 RDB 为止导致类似于 keys * 的后果。一般不建议使用 save。

bgsave:Redis 进程执⾏ fork 操作创建⼦进程,RDB 持久化过程由⼦进程负责,完成后⾃动 结束。阻塞只发⽣在 fork 阶段,⼀般时间很短。不会影响 Redis 服务器处理其他客户端的请求和命令。

2. 自动触发

Redis 运行自动触发 RDB 持久化机制。

1. 使用 save 配置。如 "save m n" 表示 m 秒内数据集至少发生了 n 次修改,自动 RDB 持久化。

2. 执行 shutdown 命令关闭 Redis 时,执行 RDB 持久化

3. 从节点进行全量复制操作时,主节点自动进行 RDB 持久化,随后将 RDB ⽂件内容发送给从结点。

特点

(1)数据恢复:RDB 存储的是 Redis 在某个时间点的数据,恢复时只需从磁盘中读取最近保存的快照文件即可,因此恢复速度非常快。

(2)数据完整性:由于是按一定时间间隔进行备份,数据可能会存在一部分的丢失,对数据完整性和一致性要求不高时更适合使用。

(3)磁盘空间:RDB文件是二进制数据压缩文件,数据落地速度快,体积小,节省磁盘空间。

(4)性能影响:在Fork的时候,内存中的数据被克隆了一份,大致2倍的膨胀性需要考虑。虽然Redis 在 fork 时使用了写时拷贝技术,但如果数据庞大时还是比较消耗性能。

使用场景:更适合于对数据完整性要求不高、需要快速恢复且数据量较大的场景,如数据备份存储。


AOF(Append Only File)

AOF 是以日志的形式来记录每个写操作(增量保存),将 Redis 执行过的所有写指令记录下来(读操作不记录)。每次 Redis 重启的时候会读取 AOF 文件中的内容用来恢复数据(开启AOF 时 RDB 就不生效了,启动的时候不会再读取 RDB 了)

AOF 重写机制:

在进行 AOF 进行重写数据时,会有大量冗余操作(比如你set key 又 del key 就相当于啥都没干),redis 中就存在重写机制对 AOF 文件进行整理(为内存中的如今状态)。

特点

数据恢复:Redis 重启时会根据 AOF 文件的内容将写指令从前到后执行一次以完成数据的恢复工作,备份机制更稳健,丢失数据概率更低。

可读性:AOF 文件是可读的日志文本,通过操作AOF文件可以处理误操作。 磁盘空间:AOF 相比RDB 会占用更多的磁盘空间。

恢复速度:由于 AOF 记录了所有的写操作,恢复备份速度要慢于 RDB。

性能影响:如果每次读写都同步到 AOF 文件,会有一定的性能压力。

使用场景:更适合于对数据完整性要求高、需要记录每次写操作的场景,如数据恢复和误操作处理。


扩展问题

Redis 是单线程,怎么做到实现bgsave这个多线程的场景呢???

答:redis 在此处使用的是 "多进程" 的方式来完成的并发编程。

1. 执行 bgsave 命令,Redis 父进程判断当前进是否存在其他正在执⾏的子进程,如 RDB / AOF 子进程,如果存在 bgsave 命令直接返回。(也就是看看是不是只有一个在执行 bgsave)

2. 没有子进程的话,就通过 fork 创建子进程(就是把父进程复制一份,互不干扰)。

3. 父进程完成 fork 后不再阻塞,可以继续响应其他命令。

4. 子进程创建 RDB 文件,根据⽗进程内存生成临时快照文件,完成后对原有文件进行原子替换。

5. 进程发送信号给父进程表示完成,父进程更新统计信息

Redis 快重要原因是操作内存,但是引入 AOF 后,既要写内存还要写硬盘,为啥 Redis 还是很" 快 " ???

AOF 不会影响到 redis 处理请求的速度:

1. AOF 机制不是直接让工作线程把数据写到硬盘,而是先写到内存中的缓冲区,进行积累,再统一写入硬盘。大大降低了写硬盘的次数。(写到硬盘中的数据大小对性能影响不大,写入的次数是重要因素)

2. 硬盘上读写数据,顺序读写相对比较快(还是比读内存慢),随机访问比较慢。AOF 就是把新的操作写入到原有文件的末尾属于顺序写入。

上面说写入到缓冲区,那么缓冲区刷新策略是什么呢 ?

always:写一条数据到缓冲区就立马刷新。

everysec:每秒刷新一次。

no:操作系统自己进行刷新。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/691218.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

网络编程之XDP技术介绍

一、简介 XDP:eXpress Data Path,快速数据面,听名字是不是很高大上。其实它就是一个快速处理Rx数据包的数据面技术。为什么现在对数据处理如此敏感?原因非常简单,随着网络的不断覆盖社会的各个层面,海量的…

手撕C语言题典——相交链表

目录 前言 一,思路 1)暴力 2)同步指针 二,代码实现 前言 依旧是力扣上的一道题,有许多新思路提供给我们 160. 相交链表 - 力扣(LeetCode)https://leetcode.cn/problems/intersection-of-two-linked-li…

烧写uboot、linux镜像、根文件系统到开发板

烧写uboot、linux镜像、根文件系统到开发板 环境介绍 本博客使用x6818开发板。 公司:三星 ARM架构 Cortex-A53核 型号:S5P6818 特性:8核,最高主频2GHz 烧写uboot 使用网络烧写 网络烧写上位机是Ubuntu虚拟机。 先利用上…

运 算 符

算术运算符 算术运算符包括:,-,*,/,%,,-- 当左右两边都是数值型时,则做加法运算。 当左右两边有一方为字符串,则做拼接运算。任何一个 Java 对象都可以转换为字符串。 …

【Python】 闭包

什么是闭包 用一句话粗略概况为:在一个函数内,读取外部函数定义的变量的机制。更一般地说,闭包函数是带有状态的函数,状态是指调用环境的上下文,当函数带上了状态就是闭包。 如下代码,在函数f内定义了一个…

pyinstall 打包 paddleocr 成为.exe文件步骤

一、首先进入虚拟环境 使用pip安装pyinstaller pip install pyinstaller我的已经安装完成 二、用cmd进入当前打包文件夹下,新建使spec文件内容如下 注意:其中需要修改的部分是pathex中文件所在路径文件内容摘抄自另一篇博文(❄点击可查看❄) # -*- m…

pytorch 加权CE_loss实现(语义分割中的类不平衡使用)

加权CE_loss和BCE_loss稍有不同 1.标签为long类型,BCE标签为float类型 2.当reduction为mean时计算每个像素点的损失的平均,BCE除以像素数得到平均值,CE除以像素对应的权重之和得到平均值。 参数配置torch.nn.CrossEntropyLoss(weightNone,…

2024 cicsn ezbuf

文章目录 参考protobuf逆向学习复原结构思路exp 参考 https://www.y4ng.cn/posts/pwn/protobuf/#ciscn-2024-ezbuf protobuf 当时压根不知道用了protobuf这个玩意,提取工具也没提取出来,还是做题做太少了,很多关键性的结构都没看出来是pro…

Vue的基础知识:v-model的原理,由:value与@input合写。

原理:v-model本质上是一个语法糖,比如应用在输入框上,就是value属性和input事件的合写。(补充说明:语法糖就是语法的简写) 作用:提供数据的双向绑定 1.数据变,视图(也就…

spring-kafka-生产者服务搭建测试(SpringBoot整合Kafka)

文章目录 1、生产者服务搭建1.1、引入spring-kafka依赖1.2、application.yml配置----v1版1.3、使用Java代码创建主题分区副本1.4、发送消息 1、生产者服务搭建 1.1、引入spring-kafka依赖 <?xml version"1.0" encoding"UTF-8"?> <project xml…

王学岗鸿蒙开发(北向)——————(七)ArkUi的各种装饰器

arts包含如下&#xff1a;1&#xff0c;装饰器 &#xff1b;2&#xff0c;组件的描述(build函数)&#xff1b;3&#xff0c;自定义组件(Component修饰的),是可复用的单元&#xff1b;4&#xff0c;系统的组件(鸿蒙官方提供)&#xff1b;等 装饰器的作用:装饰类、变量、方法、结…

【Qt】Frame和Widget的区别

1. 这两个伙计有啥区别&#xff1f; 2. 区别 2.1 Frame继承自Widget&#xff0c;多了一些专有的功能 Frame Widget 2.2 Frame可以设置边框

【Python列表解锁】:掌握序列精髓,驾驭动态数据集合

文章目录 &#x1f680;一、列表&#x1f308;二、常规操作&#x1f4a5;增&#x1f4a5;删&#x1f4a5;改&#x1f4a5;查 ⭐三、补充操作 &#x1f680;一、列表 列表是一个能够存储多个同一或不同元素的序列 列表&#xff1a;list ---- [] 列表属于序列类型&#xff08;容器…

Unity2D游戏制作入门 | 09(之人物动画制作)

上期链接&#xff1a;Unity2D游戏制作入门 | 08-CSDN博客 人物走路动画逻辑补充&#xff08;该帖没有的内容&#xff0c;我给补充了请先看完这帖&#xff0c;再去看补充&#xff09;&#xff1a;人物按下shifit走路动画设定09&#xff08;第九期先行补充&#xff09; 上期我们…

汇编语言(keil)

1、读内存&#xff1a;Load LDR R0,[R1,#4]; 读地址“R14”&#xff0c;得到的4字节数据存入R0。 2、写内存&#xff1a;Stroe STR R0,[R1,#4]; 把R0的4字节数据写入地址“R14”。 3、加减 ADD R0,R1,R2; R0R1R2 ADD R0,R0,#1; R0R01 SUB R0,R1,R2; R0R1-R…

GiantPandaCV | 提升分类模型acc(一):BatchSizeLARS

本文来源公众号“GiantPandaCV”&#xff0c;仅用于学术分享&#xff0c;侵权删&#xff0c;干货满满。 原文链接&#xff1a;提升分类模型acc(一)&#xff1a;BatchSize&LARS 在使用大的bs训练情况下&#xff0c;会对精度有一定程度的损失&#xff0c;本文探讨了训练的b…

【CS.SE】端午节特辑:Docker容器化技术详解与实战

端午节, 先祝愿大家端午安康&#xff0c;阖家幸福, 哈哈&#xff01;这篇讲下Docker这一现代软件开发中不可或缺的技术。软件工程涉及软件开发的整个生命周期&#xff0c;包括需求分析、设计、构建、测试、部署和维护。Docker作为一种容器化技术&#xff0c;直接关联到软件部署…

WWDC 2024前瞻:苹果如何用AI技术重塑iOS 18和Siri

苹果下周的全球开发者大会有望成为这家 iPhone 制造商历史上的关键时刻。在 WWDC 上&#xff0c;这家库比蒂诺科技巨头将展示如何选择将人工智能技术集成到其设备和软件中&#xff0c;包括通过与 OpenAI 的历史性合作伙伴关系。随着重大事件的临近&#xff0c;有关 iOS 18 及其…

uniapp引入uview无代码提示

前提安装正确&#xff1a; 无论是基于npm和Hbuilder X方式安装&#xff0c;一定要配置正确。 解决办法 以前在pages.json里面的写法&#xff1a; "easycom": {"^u-(.*)": "uview-ui/components/u-$1/u-$1.vue" }但是现在hbuilderx要求规范ea…

【小白专用24.6.8】C# 异步任务Task和异步方法async/await详解

一、什么是异步 同步和异步主要用于修饰方法。当一个方法被调用时&#xff0c;调用者需要等待该方法执行完毕并返回才能继续执行&#xff0c;我们称这个方法是同步方法&#xff1b;当一个方法被调用时立即返回&#xff0c;并获取一个线程执行该方法内部的业务&#xff0c;调用…