【redis】集群如何搭建集群詳解

文章目錄

集群搭建
1. 創建目錄和配置
2. 編寫 docker-compose.yml
- 完整配置文件
3. 啟動容器
4. 構建集群
- - 超時

集群搭建

基于 docker 在我們云服務器上搭建出一個 redis 集群出來 image.png|486

當前節點，主要是因為我們只有一個云服務器，搞分布式系統，就比較麻煩。實際工作中，一般是通過多個主機的方式，來搭建集群

此處我們使用 9 個 docker 容器，來模擬 9 臺服務器

此處我們創建 11 個 redis 節點，其中前 9 個用來演示集群的搭建，后 2 個用來演示集群擴容

一定要記得，把以前啟動的 redis 容器給停掉

切換到對應目錄下后，輸入：

# 查看有哪些容器正在運行
docker ps -a  # 關閉此目錄下的容器
docker-compose down

1. 創建目錄和配置

切換到 Cluster 目錄后

touch docker-compose.ymltouch generate.sh

image.png|422

在 Linux 上，以 .sh 后綴結尾的文件，稱為“shell 腳本”
- 使用 Linux 的時候，都是通過一些命令來進行操作的。使用命令操作，就非常適合把命令給寫到一個文件中，批量化執行
- 同時，還能加入：條件、循環、函數等機制。因此，就可以基于這些來完成更復雜的工作了
此處我們需要創建 11 個 redis 節點，這些 redis 的配置文件內容，大同小異，此時就可以使用腳本來批量生成（也可以不使用腳本，手動一個一個改）

shell 腳本：

for port in $(seq 1 9); \
do \
mkdir -p redis${port}/
touch redis${port}/redis.conf
cat << EOF > redis${port}/redis.conf
port 6379
bind 0.0.0.0
protected-mode no
appendonly yes
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
cluster-announce-ip 172.30.0.10${port}
cluster-announce-port 6379
cluster-announce-bus-port 16379
EOF
done# 注意 cluster-announce-ip 的值有變化.
for port in $(seq 10 11); \
do \
mkdir -p redis${port}/
touch redis${port}/redis.conf
cat << EOF > redis${port}/redis.conf
port 6379
bind 0.0.0.0
protected-mode no
appendonly yes
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
cluster-announce-ip 172.30.0.1${port}
cluster-announce-port 6379
cluster-announce-bus-port 16379
EOF
done

for port in $(seq 1 9); \：基于范圍的循環。類似與 Java 的 for each
- seq 就是一個 Linux 命令，后面倆參數就是從哪到哪，能生成 [1， 9] 這個區間
do 和 done：在 shell 腳本里面，{} 用來表示變量，不是表示代碼塊。對于 for 來說，就是使用 do 和 done 來表示代碼塊開始和結束
\：是續行符，把下一行的內容和當前行，合并成一行。shell 默認情況下，要求把所有的代碼都寫到一行里，所以可以使用續行符來換行
循環體里面：
1. mkdir -p redis${port}/：創建目錄，名字為 redis1 -> redis9（shell 中拼接字符串是直接寫到一起，而不需要使用 +）
  - ${} 是取變量的值操作
2. touch redis${port}/redis. conf ：創建文件。在剛才的目錄基礎下，創建 redis.conf
3. cat：進行寫內容。將下面的內容，寫到剛剛創建的文件中去
  - 文件里面大多是一樣的，cluster-announce-ip 172.30.0.10${port} 有點變化。我們通過變量來構造不同的 ip
  - cluster-enabled yes：開啟集群
  - cluster-config-file nodes.conf：里面包含了一些集群的配置信息，不用我們手動寫，而是 redis 自動生成的（后續啟動這些節點之后，會配置一些 redis 集群信息）
  - cluster-node-timeout 5000：多個節點之間進行交互，保持聯絡
  - cluster-announce-ip 172.30.0.10${port}：該 redis 節點（自己）所在主機的 ip 地址（當前是使用 docker 容器模擬的主機，所以此處寫的是 docker 容器的 ip）
  - cluster-announce-port 6379：redis 節點自身綁定的端口（容器內的端口），不同容器內部可以有相同端口，后續進行端口映射，再把這些容器內的端口映射到容器外的不同端口即可
  - cluster-announce-bus-port 16379：
    - 業務端口：用來進行業務數據通信。響應 redis 客戶端的請求
    - 管理端口：為了完成一些管理上的任務來進行通信。如果某個分片中的 redis 主節點掛了，就需要讓從節點成為主節點，就需要通過剛才管理端口來完成對應的操作（Tomcat 里面，8080 是業務端口，8005 是管理端口）
這些配置項都不用記，用到時候去查即可

預期效果：得到 11 個目錄，每個目錄里面都有一個配置文件，配置文件中，ip 地址各不相同

執行命令：
通過命令：

bash generate.sh

隨后可以看到目錄里面： image.png|213

2. 編寫 docker-compose.yml

version: '3.7'
networks:mynet:ipam:config:- subnet: 172.30.0.0/24services:redis1:image: 'redis:5.0.9'container_name: redis1restart: alwaysvolumes:- ./redis1/:/etc/redis/ports:- 6371:6379- 16371:16379command:redis-server /etc/redis/redis.confnetworks:mynet:ipv4_address: 172.30.0.101// 剩余10個容器，格式和這個一樣，將名字、端口號、ip地址遞增即可

networks：此處為了后續創建靜態 ip，此時要先手動創建出網絡，同時給這個網段也分配 ip
- ip 地址 = 網絡號 + 主機號。使用子網掩碼的方式來區分網絡號和主機號
- 這里的 /24 就代表子網掩碼左邊 24 位都是 1 ，右邊 8 位是 0，255.255.255.0，網絡號就是 172.30.0
  - ip 是內網 ip
  - 配置的網絡號不能和當前主機上現有的其他網段沖突（每個人的主機上已有的網段，具體不一定一樣，ifconfig）
后面就是常規操作，配置容器
- ports：此處不進行端口映射，也是可以的，映射一下目的是為了在容器外面通過客戶端直接進行訪問
- 靜態 ip 配置，網絡號部分要和前面的網段一致，主機號部分，可以隨便配置（1-255，保證不重復），按照之前在配置文件中寫的 101-111 這 11 臺主機

進行上述配置的時候，一定要保證前后一致性（第一步和第二部相關部分，端口號、ip 地址）

完整配置文件

version: '3.7'
networks:mynet:ipam:config:- subnet: 172.30.0.0/24services:redis1:image: 'redis:5.0.9'container_name: redis1restart: alwaysvolumes:- ./redis1/:/etc/redis/ports:- 6371:6379- 16371:16379command:redis-server /etc/redis/redis.confnetworks:mynet:ipv4_address: 172.30.0.101redis2:image: 'redis:5.0.9'container_name: redis2restart: alwaysvolumes:- ./redis2/:/etc/redis/ports:- 6372:6379- 16372:16379command:redis-server /etc/redis/redis.confnetworks:mynet:ipv4_address: 172.30.0.102redis3:image: 'redis:5.0.9'container_name: redis3restart: alwaysvolumes:- ./redis3/:/etc/redis/ports:- 6373:6379- 16373:16379command:redis-server /etc/redis/redis.confnetworks:mynet:ipv4_address: 172.30.0.103redis4:image: 'redis:5.0.9'container_name: redis4restart: alwaysvolumes:- ./redis4/:/etc/redis/ports:- 6374:6379- 16374:16379command:redis-server /etc/redis/redis.confnetworks:mynet:ipv4_address: 172.30.0.104redis5:image: 'redis:5.0.9'container_name: redis5restart: alwaysvolumes:- ./redis5/:/etc/redis/ports:- 6375:6379- 16375:16379command:redis-server /etc/redis/redis.confnetworks:mynet:ipv4_address: 172.30.0.105redis6:image: 'redis:5.0.9'container_name: redis6restart: alwaysvolumes:- ./redis6/:/etc/redis/ports:- 6376:6379- 16376:16379command:redis-server /etc/redis/redis.confnetworks:mynet:ipv4_address: 172.30.0.106redis7:image: 'redis:5.0.9'container_name: redis7restart: alwaysvolumes:- ./redis7/:/etc/redis/ports:- 6377:6379- 16377:16379command:redis-server /etc/redis/redis.confnetworks:mynet:ipv4_address: 172.30.0.107redis8:image: 'redis:5.0.9'container_name: redis8restart: alwaysvolumes:- ./redis8/:/etc/redis/ports:- 6378:6379- 16378:16379command:redis-server /etc/redis/redis.confnetworks:mynet:ipv4_address: 172.30.0.108redis9:image: 'redis:5.0.9'container_name: redis9restart: alwaysvolumes:- ./redis9/:/etc/redis/ports:- 6379:6379- 16379:16379command:redis-server /etc/redis/redis.confnetworks:mynet:ipv4_address: 172.30.0.109redis10:image: 'redis:5.0.9'container_name: redis10restart: alwaysvolumes:- ./redis10/:/etc/redis/ports:- 6380:6379- 16380:16379command:redis-server /etc/redis/redis.confnetworks:mynet:ipv4_address: 172.30.0.110redis11:image: 'redis:5.0.9'container_name: redis11restart: alwaysvolumes:- ./redis11/:/etc/redis/ports:- 6381:6379- 16381:16379command:redis-server /etc/redis/redis.confnetworks:mynet:ipv4_address: 172.30.0.111

3. 啟動容器

啟動之前，一定要把之前已經運行的 redis 相關東西都干掉！否則就可能因為端口沖突等原因，導致現在的啟動失敗

通過下面命令啟動

docker-compose up -d

4. 構建集群

此處把前 9 個主機構建成集群，3 主 6 從，后 2 個主機暫時不用

相關命令：

redis-cli --cluster create 172.30.0.101:6379 172.30.0.102:6379 172.30.0.103:6379 172.30.0.104:6379 172.30.0.105:6379 172.30.0.106:6379 172.30.0.107:6379 172.30.0.108:6379 172.30.0.109:6379 --cluster-replicas 2