Redis 主從復制的實現原理是什么?

Redis主從復制的實現原理可通過以下核心機制與流程解析:

一、核心目標與角色分工

Redis主從復制通過**單一主節點(Master)**處理寫操作,**多個從節點(Slave)**同步數據并提供讀服務,實現:

  • 數據冗余:主節點數據備份至從節點,避免單點故障。
  • 讀寫分離:主節點專注寫負載,從節點分擔讀請求,提升并發性能。
  • 高可用基礎:為主從切換(如Sentinel或Cluster)提供數據同步能力。

二、關鍵實現流程

1. 連接建立與身份驗證
  • 從節點發起連接:通過SLAVEOF <master_ip> <master_port>命令或配置文件指定主節點信息。
  • 主節點驗證:若配置密碼(requirepass),從節點需提供正確密碼(masterauth)。
  • 建立專用套接字:主從節點通過持久化連接傳輸數據與命令。
2. 數據同步階段

根據場景分為全量復制增量復制

(1)全量復制(Full Resynchronization)
  • 觸發條件
    • 從節點首次連接主節點。
    • 主節點重啟或從節點數據丟失(如斷線時間過長)。
  • 流程
    1. 生成RDB快照:主節點執行BGSAVE生成當前數據快照,記錄期間新寫命令到復制緩沖區
    2. 傳輸快照:主節點將RDB文件發送至從節點,從節點清空本地數據并加載快照。
    3. 同步緩沖區命令:主節點發送復制緩沖區中的寫命令,確保從節點數據與主節點一致。
(2)增量復制(Partial Resynchronization)
  • 觸發條件:從節點短暫斷線后重連,且主節點復制積壓緩沖區(Replication Backlog)仍包含斷線期間的寫命令。
  • 流程
    1. 發送PSYNC命令:從節點攜帶復制偏移量(offset)發送PSYNC <replid> <offset>
    2. 檢查緩沖區:主節點根據offset判斷是否在積壓緩沖區范圍內。
      • :發送缺失的寫命令,完成增量同步。
      • :觸發全量復制。
3. 命令傳播階段
  • 實時同步:全量復制完成后,主節點每執行一條寫命令,立即異步發送給所有從節點。
  • 心跳檢測
    • 主節點每10秒發送PING命令,檢測從節點存活狀態。
    • 從節點每秒發送REPLCONF ACK <offset>,上報當前復制偏移量,主節點據此監控同步延遲。

三、核心組件與機制

1. 復制積壓緩沖區(Replication Backlog)
  • 作用:環形緩沖區,存儲主節點近期寫命令,支持增量復制。
  • 配置參數repl-backlog-size(默認1MB),需根據寫負載調整,避免頻繁全量復制。
2. 復制偏移量與復制ID
  • 偏移量(Offset):標記數據同步位置,斷線后用于定位缺失數據。
  • 復制ID(ReplID):唯一標識主節點數據版本,確保從節點同步正確數據源。
3. 異步復制與數據一致性
  • 異步特性:主節點寫操作不等待從節點確認,可能存在數據延遲。
  • 增強一致性配置
    • min-slaves-to-write N:要求至少N個從節點在線才允許寫入。
    • min-slaves-max-lag T:從節點同步延遲超過T秒時,主節點拒絕寫入。
    • WAIT命令:強制等待指定從節點同步完成,實現半同步。

四、故障轉移與高可用擴展

  • 手動切換:通過SLAVEOF NO ONE提升從節點為主節點,需調整配置(如replica-priority)。
  • 自動故障轉移:結合Redis Sentinel,監控主節點狀態,選舉新主節點并重定向從節點。

五、實踐建議

  1. 監控復制狀態:通過INFO replication命令查看主從節點偏移量、延遲等指標。
  2. 優化緩沖區大小:根據寫負載調整repl-backlog-size,減少全量復制。
  3. 負載均衡:在高并發讀場景下,通過代理(如Twemproxy)或客戶端路由分配讀請求至從節點。
  4. 持久化配合:主節點開啟AOF持久化,減少故障后的數據丟失風險。

通過上述機制,Redis主從復制實現了高效的數據同步與高可用性,是構建分布式緩存系統的核心基礎。

我正在編程導航學習項目課程,和其他編程愛好者一起交流進步,你也一起來吧
點擊進入

本文來自互聯網用戶投稿,該文觀點僅代表作者本人,不代表本站立場。本站僅提供信息存儲空間服務,不擁有所有權,不承擔相關法律責任。
如若轉載,請注明出處:http://www.pswp.cn/web/80060.shtml
繁體地址,請注明出處:http://hk.pswp.cn/web/80060.shtml
英文地址,請注明出處:http://en.pswp.cn/web/80060.shtml

如若內容造成侵權/違法違規/事實不符,請聯系多彩編程網進行投訴反饋email:809451989@qq.com,一經查實,立即刪除!

相關文章

量化交易 - 網格交易策略實現與原理解析

&#x1f4c8; 網格交易策略實現與原理解析 &#x1f9e0; 什么是網格交易策略&#xff1f; 網格交易&#xff08;Grid Trading&#xff09;是一種經典的量化交易策略&#xff0c;其核心思想是在價格的不同區間&#xff08;“網格”&#xff09;中設置買入和賣出操作&#xf…

前端npm的核心作用與使用詳解

一、npm是什么? npm(Node Package Manager) 是 Node.js 的默認包管理工具,也是全球最大的開源代碼庫生態系統。雖然它最初是為 Node.js 后端服務設計的,但如今在前端開發中已成為不可或缺的基礎設施。通過npm,開發者可以輕松安裝、管理和共享代碼模塊。 特性: 依賴管理…

Vue3學習(組合式API——生命周期函數基礎)

目錄 一、Vue3組合式API中的生命周期函數。 &#xff08;1&#xff09;各階段生命周期涉及函數簡單介紹。 <1>創建掛載階段的生命周期函數。 <2>更新階段的生命周期函數。 <3>卸載階段的生命周期函數。 <4>錯誤處理的生命周期函數。 &#xff08;2&…

道通EVO MAX系列無人機-支持二次開發

道通EVO MAX系列無人機-支持二次開發 EVO Max 系列采用Autel Autonomy自主飛行技術&#xff0c;實現復雜環境下的全局路徑規劃、3D場景重建、自主繞障和返航&#xff1b;高精度視覺導航能力&#xff0c;使其在信號干擾強、信號遮擋、信號弱等復雜環境下&#xff0c;依然獲得高精…

網張實驗操作-防火墻+NAT

實驗目的 了解防火墻&#xff08;ENSP中的USG5500&#xff09;域間轉發策略配置、NAT&#xff08;與路由器NAT配置命令不同&#xff09;配置。 網絡拓撲 兩個防火墻連接分別連接一個內網&#xff0c;中間通過路由器連接。配置NAT之后&#xff0c;內網PC可以ping公網&#xf…

FPGA: UltraScale+ bitslip實現(方案+代碼)

收獲 一晃五年~ 五年前那個夏夜&#xff0c;我對著泛藍的屏幕敲下《給十年后的自己》&#xff0c;在2020年的疫情迷霧中編織著對未來的想象。此刻回望&#xff0c;第四屆集創賽的參賽編號仍清晰如昨&#xff0c;而那個在家熬夜焊電路板的"不眠者"&#xff0c;現在…

機器學習筆記2

5 TfidfVectorizer TF-IDF文本特征詞的重要程度特征提取 (1) 算法 詞頻(Term Frequency, TF), 表示一個詞在當前篇文章中的重要性 逆文檔頻率(Inverse Document Frequency, IDF), 反映了詞在整個文檔集合中的稀有程度 (2) API sklearn.feature_extraction.text.TfidfVector…

UV 快速入門和使用案例

UV 快速入門和使用案例 作者&#xff1a;王珂 郵箱&#xff1a;49186456qq.com 文章目錄 UV 快速入門和使用案例簡介一、安裝1.1 安裝包安裝1.2 從 PyPI 安裝二、使用2.1 創建項目2.2 包管理2.3 工具2.4 Python 版本 簡介 官網&#xff1a; 項目&#xff1a; https://githu…

質控腳本來嘍

好久不更新&#xff0c;上個硬貨。腳本需提前準備宿主和rrna的bowtie2索引文件&#xff0c;原始數據的命名方式為{sample}_raw_1/2.fq.gz&#xff0c;保存有原始數據路徑的文件&#xff0c;保存樣品列表的文件。 最后打個廣告&#xff0c;歡迎畜牧學方向的研究生報考蘭州大學。…

Linux Bash | Capture Output / Recall

注&#xff1a;本文為 “Linux Bash | Capture Output / Recall” 相關文章合輯。 英文引文&#xff0c;機翻未校。 中文引文&#xff0c;略作重排。 Automatically Capture Output of the Last Command Into a Variable Using Bash 使用 Bash自動將最后一個命令的輸出捕獲到…

編程題 03-樹2 List Leaves【PAT】

文章目錄 題目輸入格式輸出格式輸入樣例輸出樣例 題解解題思路完整代碼 編程練習題目集目錄 題目 Given a tree, you are supposed to list all the leaves in the order of top down, and left to right. 輸入格式 Each input file contains one test case. For each case, …

QT設置MySQL驅動

QSqlDatabase: QMYSQL driver not loaded QSqlDatabase: available drivers: QSQLITE QMYSQL QMYSQL3 QODBC QODBC3 QPSQL QPSQL7 第一步&#xff1a;下載MySQL https://dev.mysql.com/downloads/mysql/ 解壓縮下載的安裝包&#xff0c;其目錄結構如下所示&#xff1a; 第二…

ABP User Interface-Angular UI中文詳解

本系列文章主要用于對ABP User Interface-Angular UI &#xff08;Angular UI | ABP.IO Documentation&#xff09;不分的中文講解以及記錄自己在學習過程中發現的容易出錯的地方。 1. 開發Development 2. 核心功能Core Functions 3. 通用組件Utilities 4. 自定義Customiza…

常用負載均衡技術有哪些?不同網絡層面上的網絡負載均衡技術

前言 負載均衡是一種策略&#xff0c;它能讓多臺服務器或多條鏈路共同承擔一些繁重的計算或I/O任務&#xff0c;從而以較低成本消除網絡瓶頸&#xff0c;提高網絡的靈活性和可靠性。 在系統管理員發現網絡性能不好時&#xff0c;可以通過網絡負載均衡來分配資源&#xff0c;以…

ARMV8 RK3399 u-boot TPL啟動流程分析 --crt0.S

上一篇介紹到start.S 最后一個指令是跳轉到_main, 接下來分析 __main 都做了什么 arch/arm/lib/crt0.S __main 注釋寫的很詳細&#xff0c;主要分為5步 1. 準備board_init_f的運行環境 2. 跳轉到board_init_f 3. 設置broad_init_f 申請的stack 和 GD 4. 完整u-boot 執行re…

RabbitMQ--進階篇

RabbitMQ 客戶端整合Spring Boot 添加相關的依賴 <dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-amqp</artifactId> </dependency> 編寫配置文件&#xff0c;配置RabbitMQ的服務信息 spri…

Redis--基礎知識點--27--redis緩存分類樹

在 Redis 中存儲分類樹&#xff0c;通常需要選擇合適的數據結構來表現層級關系。以下是使用 字符串&#xff08;String&#xff09; 和 哈希&#xff08;Hash&#xff09; 兩種常見方案的舉例說明&#xff0c;結合電商分類場景&#xff08;如 電子產品 > 手機 > 智能手機…

【C++】匯編角度分析棧攻擊

棧攻擊 介紹原理示例代碼匯編分析 介紹原理 核心原理是通過 緩沖區溢出&#xff08;Buffer Overflow&#xff09; 等漏洞&#xff0c;覆蓋棧上的關鍵數據&#xff08;如返回地址、函數指針&#xff09;&#xff0c;從而改變程序執行流程&#xff1b; 在 C 中&#xff0c;每個…

訪問 Docker 官方鏡像源(包括代理)全部被“重置連接”或超時

華為云輕量應用服務器&#xff08;Ubuntu 系統&#xff09; 遇到的問題是&#xff1a; &#x1f512; 訪問 Docker 官方鏡像源&#xff08;包括代理&#xff09;全部被“重置連接”或超時了&#xff0c;說明你這臺服務器的出境網絡對這些國外域名限制很嚴格&#xff0c;常見于華…

Java語言

本文來源 &#xff1a; 騰訊元寶 Java是一種面向對象、跨平臺的高級編程語言&#xff0c;最初由Sun Microsystems&#xff08;現為Oracle公司所有&#xff09;于1995年推出&#xff0c;廣泛應用于Web開發、移動應用、大數據處理、嵌入式系統等領域。以下是其核心特點和應用概述…