Redis持久化詳解
文章目錄
- Redis持久化詳解
-
- 前言
- RDB和AOF的區別
- RDB和AOF的優缺點
- Redis 持久化配置
- 1、RDB持久化配置
- 2、AOF持久化配置(嘗試修復會刪除aof文件內容)
- 3、AOF 重寫功能
-
-
- 新增知識點:
- 新增知識點:
-
前言
Redis是一種高級 key-value 型的NoSQL數據庫。它跟memcached類似是內存型數據庫,不過Redis數據可以做持久化,即內存中的數據可以同步到磁盤進行存儲。而且Redis所支持的數據類型很豐富。有字符串,鏈表,集合和有序集合等。Redis支持在服務器端計算集合的并交和補集(difference)等,還支持多種排序功能。所以Redis也可以被看成是一個數據結構型服務器。
Redis的所有數據都是保存在內存中,然后不定期的通過異步方式保存到磁盤上(這稱為"半持久化模式"RDB);也可以把每一次數據變化都寫入到一個 append only file(AOF)里面(這稱為"全持久化模式")。
Redis的數據都存放在內存中,如果沒有配置持久化功能,Redis重啟后數據就全丟失了,于是需要開啟Redis的持久化功能,將數據保存到磁盤上,當Redis重啟后,可以從磁盤中恢復數據。Redis提供兩種方式進行持久化,一種是RDB 持久化(原理是將 Redis在內存中的數據庫記錄定時 dump 到磁盤上的 RDB持久化),另外一種是 AOF(append only file)持久化(原理是將Redis的操作日志以追加的方式寫入文件)。那么這兩種持久化方式有什么區別呢,改如何選擇呢?
RDB和AOF的區別
RDB持久化是指在指定的時間間隔內將內存中的數據集快照寫入磁盤,實際操作過程是fork
一個子進程,先將數據集寫入臨時文件,寫入成功后,再替換之前的文件,用二進制壓縮存儲。
AOF持久化以日志的形式記錄服務器所處理的每一個寫、刪除操作。查詢操作不會記錄(類似于MySQL數據庫的Binlog),以文本的方式記錄,可以打開文件看到詳細的操作記錄。
RDB和AOF的優缺點
RDB存在哪些優勢呢?
-
一旦采用該方式,那么你的整個Redis數據庫將只包含一個文件,這對于文件備份而言是非常完美的。比如,你可能打算每個小時歸檔一次最近24小時的數據,同時還要每天歸檔一次最近30天的數據。通過這樣的備份策略,一旦系統出現災難性故障,我們可以非常容易的進行恢復。
-
對于災難恢復而言,RDB是非常不錯的選擇。因為我們可以非常輕松的將一個單獨的文件壓縮后再轉移到其它存儲介質上。
-
性能最大化。對于Redis的服務進程而言,在開始持久化時,它唯一需要做的只是fork出子進程,之后再由子進程完成這些持久化的工作,這樣就可以極大的避免服務進程執行IO 操作了。
-
相比于AOF機制,如果數據集很大,RDB的啟動效率會更高。
RDB又存在哪些劣勢呢?
-
如果想保證數據的高可用性,即最大限度的避免數據丟失,那么RDB將不是一個很好的選擇。因為系統一旦在定時持久化之前出現宕機現象,此前沒有來得及寫入磁盤的數據都將丟失。
-
由于RDB是通過fork子進程來協助完成數據持久化工作的,因此,如果當數據集較大時,可能會導致整個服務器停止服務幾百毫秒,甚至是1秒鐘。
AOF 的優勢有哪些呢?
-
該機制可以帶來更高的數據安全性,即數據持久性。Redis中提供了3種同步策略,即每秒同步、每修改同步和不同步。事實上,每秒同步也是異步完成的,其效率也是非常高的,所差的是一旦系統出現宕機現象,那么這一秒鐘之內修改的數據將會丟失。而每修改同步,我們可以將其視為同步持久化,即每次發生的數據變化都會被立即記錄到磁盤中。可以預見,這種方式在效率上是最低的。
-
由于該機制對日志文件的寫入操作采用的是 append(追加)模式,因此在寫入過程中即使出現宕機現象,也不會破壞日志文件中已經存在的內容。然而如果我們本次操作只是寫入了一半數據就出現了系統崩潰問題,不用擔心,在Redis下一次啟動之前,我們可以通過redis-check-aof工具來幫助我們解決數據一致性的問題。
-
如果日志過大,Redis可以自動啟用rewrite機制。即Redis以append模式不斷的將修改數據寫入到老的磁盤文件中,同時Redis還會創建一個新的文件用于記錄此期間有哪些修改命令被執行。因此在進行rewrite 切換時可以更好的保證數據安全性。
-
AOF包含一個格式清晰、易于理解的日志文件用于記錄所有的修改操作。事實上,我們也可以通過該文件完成數據的重建。
AOF 的劣勢有哪些呢?
-
對于相同數量的數據集而言,AOF文件通常要大于RDB文件。RDB在恢復大數據集時的速度比AOF的恢復速度要快。
-
根據同步策略的不同,AOF在運行效率上往往會慢于RDB。總之,每秒同步策略的效率是比較高的,同步禁用策略的效率和RDB一樣高效。
二者選擇的標準,就是看系統是愿意犧牲一些性能,換取更高的緩存一致性(aof),還是愿意寫操作頻繁的時候,不啟用備份來換取更高的性能,待手動運行save的時候,再做備份(rdb)。
Redis 持久化配置
1、RDB持久化配置
Redis會將數據集的快照dump到dump.rdb文件中。此外,我們也可以通過配置文件來修改Redis服務器dump快照的頻率,在打開
6379.conf文件之后,我們搜索save可以看到下面的配置信息:
-
save 900 1 #在900秒(15
分鐘)之后,如果至少有1個key發生變化,則dump內存快照。 -
save 300 10 #在300秒(5
分鐘)之后,如果至少有10個key發生變化,則dump內存快照。 -
save 60 10000 #在60秒(1
分鐘)之后,如果至少有10000個key發生變化,則dump內存快照。
注意:RDB正常退出會保存,非法退出不保存(比如直接killall) 也可用save命令手動保存
關掉主從復制
[root@redis ~<