Redis开发与运维之第五章持久化

1. Redis提供两种持久化方式： RDB 和AOF

bgsave 命令的运作流程

RDB优点：

是一个紧凑压缩的二进制文件，代表Redis在某个时间点上的数据快照非常实用于备份，全量复制等场景。比如每6小时执行bgsave备份，并吧文件拷贝到远程机器或者文件系统中 hdfs ,用于灾难恢复。

RDB恢复数据远远快于AOF方式

缺点：

RDB方式数据没办法做到实时持久化/秒级持久化。因为bgsave每次运行都要执行fork操作创建子进程，属于重量级操作，频繁执行成本过高。

RDB文件使用特定二进制格式保存，Redis版本演进过程中有多个格式的RDB版本，存在老版本Redis服务无法箭筒新版RDB格式的问题。

AOF工作流程

AOF解决了实时性持久化数据问题采用文本协议格式

原因是：很好的兼容性、开启AOF后，所有写入命令都包含追加操作，直接采用协议格式，避免了二次处理开销、

文本协议具有可读性，方便直接修改和处理。

AOF为啥把命令追加到aof_bug中？

redis使用单线程响应命令，如果每次写AOF文件命令都直接加到硬盘，那么性能完全取决于当前硬盘负载。写写入缓冲区aof_bug中，可以提供多种缓冲区同步硬盘的策略，在性能和安全性方面做出平衡。

2.RDB使用一次性生成内存快照的方式，无法做到实时持久化，一般用于数据冷备和复制传输。

3.AOF通过追加写命令到文件实现持久化，通过appendfsync 参数可以控制实时/秒级持久化。因为需要不断追加写命令，所以AOF文件体积逐渐变大，需要定期执行重写操作来降低文件体积。

4. save命令会阻塞主线程不建议使用，bgsave命令通过fork操作创建子进程生成RDB避免阻塞。

5.AOF重写可以通过 auto-aof-rewrite-min-size 和 auto-aof-rewrite-percentage 参数控制自动触发，也可以使用bgrewriteaof命令手动触发。

AOF重写运作流程

6. 子进程执行期间使用copy-on-write 机制与父进程共享内存，避免内存消耗翻倍。AOF重写期间还需要维护重写缓冲区，保存新的写入命令避免数据丢失。

7.持久化阻塞主线程场景有： fork阻塞和 AOF 追加阻塞。 fork 阻塞时间跟内存量和系统有关，AOF追加阻塞说明硬盘资源紧张。

8..单机下部署多个实例时，为了防止出现多个子进程执行重写操作，建议做隔离控制，避免CPU和IO资源竞争。

everysec 刷盘策略的过程

轮询控制AOF重写

Redis开发与运维之第五章持久化相关推荐

Redis开发与运维必备-电子书
Redis开发与运维电子书 fulei出版链接: https://pan.baidu.com/s/12rlHhOKP7_72GE8a74lN1g 密码: eep2 复制这段内容后打开百度网盘手机Ap ...
「Redis开发与运维」读书笔记
第一章初识Redis Redis的8个重要特性速度快内存存储数据 C语言实现单线程架构,避免多线程竞争问题 Redis源码优化好基于键值对的数据结构服务器 Redis 值可支持多种数据结构, ...
＜Redis开发与运维＞一书阅读笔记记录
文章目录前言第1章:初始redis 盛赞redis redis特性 redis使用场景第2章:API的理解和使用预备知识全局命令数据结构和内部编码单线程架构字符串命令内部编码典型 ...
《Redis开发与运维》读书笔记--初识Redis（一）
目录盛赞Redis Redis特性 redis使用场景 redis可以做什么? redis不可以做什么? 关于用好redis的两点建议本章重点回顾写在前面: 想必在写项目的过程中,我们很多时候都 ...
读书笔记：redis开发与运维基础篇
redis特性 1>速度快:redis所有数据都是存放在内存中,是redis速度快的主要原因,是有c编写,一般来说用c编写的程序距离操作系统近,执行速度更快,非阻塞I/O,使用epoll ...
Redis开发与运维笔记_1 初识2 API
目录概述第1章初识Redis 1.1 盛赞Redis 1.2 Redis特性 1.3 配置.启动.操作.关闭Redis 第2章 API的理解和使用 2.1 预备 2.1.1 全局命令 2.1.2 ...
【Redis】《Redis 开发与运维》笔记-Chapter12-开发运维的“ 陷阱”
十二.开发运维的" 陷阱" 1.Linux配置优化之内存分配控制 1)vm.overcommit_memory Linux操作系统对大部分申请内存的请求都回复yes,以便能运行更多 ...
Redis 开发与运维
Getting Start 高性能性能优势的体现 C语言实现的内存管理 epoll的I/O多路复用技术+IO连接/关闭/读写通过事件实现异步的非阻塞IO TCP协议单线程架构,不会因为高并发对服务 ...
《Redis开发与运维》各章重点回顾
第 1 章初识 Redis Redis 8个特性:速度快.基于键值对的数据结构服务器.功能丰富.简单稳定.客户端语言多.持久化.主从复制.支持高可用和分布式. Redis 不是万金油,有些场景不适合 ...
Redis理解内存《Redis开发与运维读书笔记》
文章目录内存的消耗内存划分内存管理内存优化内存的消耗可以使用info memory 查看内存消耗. 内存划分对象内存 = sizeof(key) + sizeof(value) 应避免使 ...

Redis开发与运维之第五章持久化

Redis开发与运维之第五章持久化相关推荐

最新文章

热门文章