Redis的两种持久化方式详细介绍

一,Redis是一款基于内存的数据库,可以持久化,在企业中常用于缓存,相信大家都比较熟悉Redis了,下面主要分享下关于Redis持久化的两种模式

1、半持久化模式(RDB,filesnapshotting)

此模式是Redis默认的备份方式,通过快照方式,将数据从内存写入磁盘中,如果Redis异常退出,下次启动则从打快照的这个时间节点来恢复此之前的数据,根据数据量大小、结构、服务器性能不同,通常将记录1千万个string类主键、大小为1GB的快照文件载入内存中需要20~30s

触发快照参数在配置文件中已预设置:

  save   900 1 :900s内至少1个主键被更改则进行快照

  save   300 10 :300s内至少10个主键被更改则进行快照

           save   60 10000 :60s内至少10000个主键被更改则进行快照

Redis实现快照的过程:当触发快照功能时,Redis的主进程会fork出一个子进程,子进程来将数据从内存中存入磁盘中,默认存放的文件名为dump.rdb,存放路径在Redis数据目录下,这些配置可以在redis.conf中调整;此时的rdb文件会覆盖之前的rdb文件。在父进程fork出子进程时,它们共享内存中的数据,当父进程接受命令请求要修改某片数据时,为了使子进程数据不受影响,这时Redis会有一种策略,就是写时复制(copy-on-write),原理是:在父进程要改动某片数据时,操作系统会把此片数据先copy一份给子进程,以保证子进程的内存数据不受影响,所以新的rdb文件就是父进程fork子进程时那一刻的内存数据。dump.rdb文件可以进行压缩(rdbcompression),节省占用空间、方便传输,也可以禁用压缩节省cpu工作负载。除了自动执行快照,还可以通过手动save和bgsave来执行快照,两者区别是,save是由主进程来进行快照操作,会阻塞其它请求,bgsave是通过fork子进程来操作。

通过RDB方式实现持久化,一旦Redis异常退出,就会丢失最后一次快照以后更改的所有数据,此时需要开发者根据具体的应用场合,通过组合设置自动快照条件的方式来将可能发生的数据损失控制在能接受的范围内。

2,全持久化模式(AOF, append-only)

此模式需要手动修改配置文件的appendonly参数,默认为no,需要改为yes

如果数据很重要无法承受损失,则使用此模式,默认Redis没有开启AOF方式的全持久化模式,在启动时Redis会逐个执行AOF文件中的命令来将硬盘中的数据载入到内存中,载入的速度较RDB模式会慢一些,开启AOF持久化后每执行一条会更改Redis数据的命令,Redis就会将该命令写入硬盘中的AOF文件,默认文件名为appendonly.aof,位置可通过appendfilename参数设置。

需要注意的是,Redis可以同时开启两种模式,既保证了数据安全性又保证了速度及操作十分容易,此时重启Redis会使用AOF文件来恢复数据,可以设置此下参数来开启AOF模式

appendonly   yes               开启AOF模式

         appendfilename appendonly.aof          文件名称

          auto-aof-rewrite-percentage  100         当AOF文件大小超过上一次重写时的AOF文件大小的百分之多少时会再次进场重写,如果没有超过,则以启动时的AOF文件大小为依据

      auto-aof-rewrite-min-size  64MB         允许重写的最小AOF文件大小配置写入AOF文件后,要求系统刷新硬盘缓存的机制

appendfsync       always              每次执行写入操作都会执行同步,最安全也最慢                  

#appendfsync  everysec            每秒执行一次同步操作

#appendfsync          no                                               不主动进行同步操作,而是完全交由系统来操作,每30s一次,最快但不安全

原文地址:https://www.cnblogs.com/luoyan01/p/10021717.html

时间: 2024-11-12 09:49:45

Redis的两种持久化方式详细介绍的相关文章

[转载] redis 的两种持久化方式及原理

转载自http://www.m690.com/archives/371 Redis是一种高级key-value数据库.它跟memcached类似,不过数据可以持久化,而且支持的数据类型很丰富.有字符串,链表,集 合和有序集合.支持在服务器端计算集合的并,交和补集(difference)等,还支持多种排序功能.所以Redis也可以被看成是一个数据结构服务器.Redis的所有数据都是保存在内存中,然后不定期的通过异步方式保存到磁盘上(这称为“半持久化模式”):也可以把每一次数据变化都写入到一个app

探究Redis两种持久化方式下的数据恢复

对长期奋战在一线的后端开发人员来说,都知道redis有两种持久化方式RDB和AOF,虽说大家都知道这两种方式大概运作方式,但想必有实操了解得不会太多. 这里是自己实操两种持久化方式的一点点记录. 先看以下摘录自redis官网原文解释(当然原文是English,这里用google翻译过了.) Redis持久性 Redis提供了不同的持久性选项范围: RDB持久性按指定的时间间隔执行数据集的时间点快照. AOF持久性会记录服务器接收的每个写入操作,这些操作将在服务器启动时再次播放,以重建原始数据集.

Redis两种持久化方式(RDB&AOF)

爬虫和转载请注明原文地址;博客园蜗牛:http://www.cnblogs.com/tdws/p/5754706.html Redis所需内存 超过可用内存怎么办 Redis修改数据多线程并发—Redis并发锁 windows下redis基础操作与主从复制 从而 数据备份和读写分离 Redis两种持久化方式(RDB&AOF) Redis的持久化过程中并不需要我们开发人员过多的参与,我们要做的是什么呢?除了深入了解RDB和AOF的作用原理,剩下的就是根据实际情况来制定合适的策略了,再复杂一点,也就

Redis系列之----Redis的两种持久化机制(RDB和AOF)

Redis的两种持久化机制(RDB和AOF) 什么是持久化 ???Redis的数据是存储在内存中的,内存中的数据随着服务器的重启或者宕机便会不复存在,在生产环境,服务器宕机更是屡见不鲜,所以,我们希望Redis能够将数据从内存中以某种形式保存到磁盘中,使得重启的时候可以加载磁盘中的文件记录恢复数据,这一过程便是Redis的持久化. ???Redis支持两种持久化机制,一种是RDB,另一种是AOF.Redis默认情况下使用RDB方式进行持久化.两种持久化可以单独使用其中的一种,也可以二者结合使用,

redis两种持久化方式的优缺点

redis两种持久化的方式 RDB持久化可以在指定的时间间隔内生成数据集的时间点快照 AOF持久化记录服务器执行的所有写操作命令,并在服务器启动时,通过重新执行这些命令来还原数据集,AOF文件中全部以redis协议的格式来保存,新命令会被追加到文件的末尾,redis还可以在后台对AOF文件进行重写,文件的体积不会超出保存数据集状态所需要的实际大小, redis还可以同时使用AOF持久化和RDB持久化,在这种情况下,当redis重启时,它会有限使用AOF文件来还原数据集,因为AOF文件保存的数据集

Redis的两种持久化操作RDB-AOF

Redis支持RDB和AOF两种持久化机制,持久化功能有效地避免因进程退出造成的数据丢失问题,当下次重启时利用之前持久化文件即可实现数据恢复. RDB是什么 RDB持久化是把当前进程数据生成快照保存到硬盘的过程,触发RDB持久化过程分为**手动触发**和**自动触发**. 1.1.1 触发机制 手动触发分别对应save和bgsave命令: save命令:阻塞当前Redis服务器,知道RDB过程完成为止,对于内存比较大的实例会造成长时间阻塞,先上环境不建议使用.运行save命令对应Redis日志如

Redis:两种持久化方式RDB和Aof对比(3)

一.RDB快照 1.概念 默认的持久化方案. 在指定时间间隔内,执行指定次数的写操作,则会将内存中的数据写入到磁盘中. 在指定目录下生成一个dump.rdb文件. 重启会通过加载dump.rdp文件恢复数据. 2.对应配置参数 save <seconds> <changes> eg: save 900 1 save 300 10 save 60 10000 若不想用RDB方案,则为save "" # 时间策略save 900 1 save 300 10 save

Redis的持久化机制包括RBD和AOF两种,对于这两种持久化方式各有优势

RDB机制的策略 RDB持久化是指在指定的时间间隔内将内存中的数据和操作通过快照的方式保存到redis bin目录下的一个默认名为 dump.rdb的文件,可以通过配置设置自动的快照持久化的方式,我们可以配置redis在n秒内进行快照的时间,如果超过这个时间节点,将会自动执行快照操作.虽然这种方式方便快捷,但是无法保证数据的绝对安全可靠,如果服务器在非备份时间跨度内发生了故障,无法做到对当前状态的实时保存,导致数据丢失.而且每次保存 RDB文件时, Redis都需要 fork()出一个子进程,由

redis的两种持久化机制

---恢复内容开始--- RDB:在指定的时间间隔对redis中的数据进行快照存储,默认开启 AOF:记录每次操作redis的命令,将命令写入到AOF文件中,当重启redis时会重新执行这些命令来恢复数据,默认关闭. RDB方式: Redis会根据redis.conf配置文件定期将数据快照至一个RDB文件中: save [seconds] [changes]:意为每seconds秒内如果数据有changes次修改,那么就进行一次rdb快照存储.可配置多条save指令,让redis执行多级的快照保