Redis RDB持久化
文章目录
- 一、持久化简介
- 二、数据快照RDB
- 1. save指令
- 2. RDB文件相关配置
- 验证save后数据保存在了rdb文件
- 验证重启服务后,程序会从rdb文件中恢复数据到内存
- 3. bgsave指令
- 4. 配置自动持久化
- 5. RDB三种启动方式对比
- 6. rdb特殊启动形式
- 7. RDB优缺点
一、持久化简介
什么是持久化?
将内存中的数据保存至永久性存储介质称为持久化
为什么要持久化?
防止数据的意外丢失,确保数据安全性
如何防止数据丢失?
- RDB:快照形式,保存当前数据状态,存储数据结果,存储格式简单,关注点在数据
- AOF:日志形式,保存数据的操作过程,存储操作过程,存储格式复杂,关注点在数据的操作过程
二、数据快照RDB
1. save指令
使用save指令即可通过RBD方式进行数据持久化,需要手动执行save操作,持久化时会把redis中的数据默认保存在dump.rdb中,可在配置文件中指定目录
客户端在内存创建数据,并进行save持久化
查看指定dump.rdb中是否有内容
这就表示内存中的数据已经保存在硬盘文件里了
2. RDB文件相关配置
dbfilename dump.rdb
- 说明:设置本地数据库文件名,默认为dump.rdb
- 经验:通常设置为dump-端口号.rdb
dir
- 说明:设置存储.rdb文件的路径
- 经验:通常设置成存储空间较大的目录中,目录名称data
rdbcompression yes
- 说明:设置存储至本地数据库时是否压缩数据,默认为yes,采用LZF压缩
- 经验:通常默认为开启状态,如果设置成no,可以节省CPU运行时间,但会使存储的文件变大(巨大)
rdbchecksum yes
- 说明:设置读写.rdb文件时是否进行RDB文件的校验,该校验过程在写文件和读文件过程均进行,避免读写已损坏的文件
- 经验:通常默认为开启状态,如果设置为no,可以节约读写性过程约10%时间消耗,但是存储一定的数据损坏风险
stop-writes-on-bgsave-error yes
- 说明:后台存储过程中如果出现错误,是否停止保存操作
- 经验:通常默认为开启状态
修改配置后,需要重启服务程序才能生效,重启后将按照配置文件指定的文件路径和工作方式运行
验证save后数据保存在了rdb文件
服务端杀掉进程后,重新使用配置文件启动
客户端创建两个数据并save
查看rdb文件,已有相关记录
验证重启服务后,程序会从rdb文件中恢复数据到内存
客户端重新连接,发现数据还存在,这是因为服务进程启动时读取了rdb文件,进而恢复到内存中
3. bgsave指令
Redis是单线程的,所有命令都会在队列中排好队,不建议使用save指令,因为save指令的执行会阻塞当前Redis服务器,直到当前RDB过程完成,有可能会造成长时间阻塞,线上环境不建议使用
访问量很大时,单线程又得执行save,还得处理客户请求,造成效率降低,如何处理?
用bgsave解决:客户端发送bgsave后,redis会选择一个合适的时间执行后台执行,并不是像save一样收到指令立即执行
注意: bgsave命令是针对save阻塞问题做的优化,Redis内部所有涉及到RDB操作都采用bgsave的方式,save命令可以放弃使用
验证bgsave工作原理
客户端发送bgsave,可以看到给我们提示的是Background saving started
我们查看RDB文件,已经数据addr保存好了
我们查看一下日志文件(配置文件中的logfile)
4. 配置自动持久化
到目前为止,save和bgsave都是手动的保存指令,那么会引入以下问题:
- 反复执行保存命令,忘记了怎么办?
- 不知道数据产生了多少变化,何时保存?
Redis提供了一种自动进行数据持久化的方式:指定时间范围内,发生变化(这个变化包括增加、修改、删除)的key达到指定数量就进行持久化,需要在配置文件中进行一下配置:
save second changes
- second:监控时间范围
- changes:监控key的变化量
save 900 1 # 900s内有1个key发生变化,则进行bgsave持久化
save 300 10 # 300s内有10个key发生变化,则进行bgsave持久化
save 60 10000 # 60s内有10000个key发生变化,则进行bgsave持久化
修改配置conf文件
启动服务程序
客户端添加一个数据
查看服务器是否进行了持久化(rdb文件已提前清空)
客户端再添加一条数据,此时服务器按照配置文件,自动执行bgsave
此时服务器的rdb文件已经出现
无论get多少次,数据都不会改变,不会进行持久化;由于不进行数据比对,也就意味着对同一个数据连续修改两次,也会进行持久化
save使用注意事项:
- save配置要根据实际业务情况进行设置,持久化的频度过高或过低都会出现性能问题,结果可能是灾难性的
- save配置中对second与changes设置通常具有互补对应关系,尽量不要设置成包含性关系
- save配置启动后执行的是bgsave操作
5. RDB三种启动方式对比
由于配置文件启动save的方式,执行的就是bgsave,这里只比较save和bgsave
- save:由单进程执行,是同步的;save和其他的客户端请求都是排队处理的,若执行时间过长会阻塞其他指令;没有fork子进程,无额外内存消耗
- bgsave:由子进程执行,主进程可以继续处理其他请求,不会阻塞其他指令,是异步的,同时有额外内存开销(子进程)
6. rdb特殊启动形式
全量复制(在主从复制中用到)
服务器运行过程中重启
debug reload
- 关闭服务器时指定保存数据
shutdown save
7. RDB优缺点
RDB优点
- RDB是一个紧凑压缩的二进制文件,存储效率较高
- RDB内部存储的是redis在某个时间点的数据快照,非常适合用于数据备份,全量复制等场景
- RDB恢复数据的速度要比AOF快很多
- 应用:服务器中每X小时执行bgsave备份,并将RDB文件拷贝到远程机器中,用于灾难恢复
RDB缺点
- save频率低容易丢数据,save频率高会影响请求处理速度
- bgsave指令每次运行要执行fork操作创建子进程,要牺牲掉一些性能
- Redis的众多版本中未进行RDB文件格式的版本不统一,有可能出现这个版本的redis生成的rbd文件,用其他版本的redis打不开
RDB存储的弊端
- 存储数据量较大,效率较低——基于快照思想,每次读写都是全部数据,当数据量巨大时,效率非常低
- 大数据量下的IO性能较低
- 基于fork创建子进程,内存产生额外消耗
- 宕机会带来数据丢失
Redis RDB持久化相关推荐
- redis php 持久化,详解Redis RDB持久化、AOF持久化,
详解Redis RDB持久化.AOF持久化, 1.持久化 1.1 持久化简介 持久化(Persistence),持久化是将程序数据在持久状态和瞬时状态间转换的机制,即把数据(如内存中的对象)保存到可永 ...
- Redis RDB 持久化详解
来自公众号:程序员历小冰 Redis 是一种内存数据库,将数据保存在内存中,读写效率要比传统的将数据保存在磁盘上的数据库要快很多.但是一旦进程退出,Redis 的数据就会丢失. 为了解决这个问题,Re ...
- 深入剖析Redis RDB持久化机制
本文来自@凡趣科技 pesiwang同学的投稿分享,对Redis RDB文件持久化的内部实现进行了源码分析. 本文分析源码基于 Redis 2.4.7 stable 版本.下面是其文章原文: rdb是 ...
- redis RDB持久化中save和bgsave区别
SAVE 和 BGSAVE 两个命令都会调用 rdbSave 函数,但它们调用的方式各有不同: SAVE 直接调用 rdbSave ,阻塞 Redis 主进程,直到保存完成为止.在主进程阻塞期间,服务 ...
- redis之AOF和RDB持久化
写在前面 redis数据存储在内存,为了避免服务器重启或者是宕机导致数据全部丢失,提供了数据持久化机制,有AOF(Append Only File)和RDB,接下来我们分别看下. 1:AOF 如下是我 ...
- redis的持久化方式RDB和AOF的区别
https://blog.csdn.net/m0_38110132/article/details/76906422 博客 学院 下载 图文课 论坛 APP 问答 商城 VIP会员 活动 招聘 ITe ...
- Redis AOF 持久化详解
来自公众号:程序员历小冰 Redis 是一种内存数据库,将数据保存在内存中,读写效率要比传统的将数据保存在磁盘上的数据库要快很多.但是一旦进程退出,Redis 的数据就会丢失. 为了解决这个问题,Re ...
- 转-Redis AOF 持久化详解
转自: https://juejin.cn/post/6844903902991630349 Redis AOF 持久化详解 Redis 是一种内存数据库,将数据保存在内存中,读写效率要比传统的将数据 ...
- java读取rdb_Redis设计与实现-RDB持久化
众所周知Redis是一个内存数据库,因此一旦断电数据便会丢失,为了避免这种糟糕的体验,Redis提供了两种将数据写到磁盘的持久化技术,分别是RDB和AOF. 先说说RDB的一些工作方式和实现原理: 触 ...
最新文章
- 使用Python制作一个简单的刷博器
- Visual studio 快捷键大全
- Juniper 重置设备到出厂缺省设置
- BZOJ3945 : 无聊的邮递员
- 融合BI+AI,新一代增强型数据分析让制造企业高效解决故障预测分析问题
- ITK:将内核应用于图像中的每个像素
- Sencha 自定义组件函数回调
- shell命令获取结果指定行(指定行结果)
- keep公众号就“借鉴”原创文章致歉:将停更一周
- 矩阵分析与应用课后答案——张贤达版本
- 源码解读_入口开始解读Vue源码系列(二)——new Vue 的故事
- 思科交换机MST配置命令步骤-实例讲解
- Gerrit 服务搭建和升级详解(包括 H2 数据库迁移 MySQL 步骤)
- PyCharm中直接使用Anaconda已安装的库
- python导入上级目录的模块
- 阶段1 语言基础+高级_1-3-Java语言高级_05-异常与多线程_第3节 线程同步机制_4_解决线程安全问题_同步代码块...
- iphone查看html源码的app,使用扩展App在Safari上查看源代码
- 我的招聘网——用户登录模块设计与实现
- sql server 2000(迷你sql2000) jdbc驱动
- Windows下使用c++编译hiredis.lib,Win32_Interop.lib
热门文章
- C Primer Plus第六版(中文版)编程练习答案(完美修订版)汇总
- android功耗iphone,android和iPhone比起来哪个更耗电
- 好的架构就是--把模块与模块之间的直接关系均转换成通过架构来发生的间接关系
- ios 适配iPhonex时可以改变状态栏statusBar的背景颜色
- Python 图像风格化迁移助力画家梦想
- 计算机中显示器的分类,显示器屏幕有哪些类型 2017电脑显示面板类型大全
- Notepadd++显示CRLF
- 【看表情包学Linux】进程的概念 | 进程控制块 PCB | 父进程与子进程 | 进程 ID | task_struct
- 按头安利 好看又实用的摩托车壁纸素材看这里
- 英伟达P8显卡_AMD Radeon RX 6000显卡来了,谁还在意英伟达的缺货?