主頁 > 知識庫 > 使用Docker搭建Redis主從復(fù)制的集群

使用Docker搭建Redis主從復(fù)制的集群

熱門標簽:山東400電話如何辦理 蘭州語音電銷機器人軟件 電銷機器人對公司貢獻 電話機器人服務(wù)差 ai電銷機器人 如何開發(fā) 高德地圖標注在建線路 智能外呼系統(tǒng)如何部署 濟源電話外呼系統(tǒng)怎么樣 宿州防封外呼系統(tǒng)廠家

在主從復(fù)制模式的集群里,主節(jié)點一般是一個,從節(jié)點一般是兩個或多個,寫入主節(jié)點的數(shù)據(jù)會被復(fù)制到從節(jié)點上,這樣一旦主節(jié)點出現(xiàn)故障,應(yīng)用系統(tǒng)能切換到從節(jié)點去讀寫數(shù)據(jù),這樣能提升系統(tǒng)的可用性。而且如果再采用主從復(fù)制模式里默認的讀寫分離的機制,更能提升系統(tǒng)的緩存讀寫性能。所以對性能和實時性不高的系統(tǒng)而言,主從復(fù)制模式足以滿足一般的性能和安全性方面的需求。

1 概述主從復(fù)制模式

在實際應(yīng)用中,如果有相應(yīng)的設(shè)置,在向一臺Redis服務(wù)器里寫數(shù)據(jù)后,這個數(shù)據(jù)可以復(fù)制到另外一臺(或多臺)Redis服務(wù)器,這里數(shù)據(jù)源服務(wù)器叫主服務(wù)器(Master Server),而復(fù)制數(shù)據(jù)目的地所在的服務(wù)器叫從服務(wù)器(Slave Server)。

這種主從復(fù)制模式能帶來兩個好處,第一,可以把寫操作集中在主服務(wù)器上,把讀操作集中到從服務(wù)器上,這樣能提升讀寫性能;第二,由于出現(xiàn)了數(shù)據(jù)備份,所以能提升數(shù)據(jù)安全性,比如當主Redis服務(wù)器失效后,能很快切換到從服務(wù)器上讀數(shù)據(jù)。

如果在項目,并發(fā)要求不高,或者說哪怕從Redis緩存里讀不到數(shù)據(jù)對性能也不會有太大的損害,那么可以用一主一從的復(fù)制模式,效果圖如下圖所示。

也可以設(shè)置一主多從的復(fù)制效果,在下圖里,給出對應(yīng)的效果圖,即寫到主節(jié)點的數(shù)據(jù)會同步到兩個從節(jié)點上,其它一主多從的模式和這很相似。

關(guān)于主從復(fù)制模式,請大家注意如下的要點。

第一, 一個主服務(wù)器可以帶一個或多個從服務(wù)器,甚至從服務(wù)器也可以再帶從服務(wù)器,但在復(fù)制數(shù)據(jù)時,只能把主服務(wù)器的數(shù)據(jù)復(fù)制到從服務(wù)器上,反之不能。

第二, 一臺從服務(wù)器只能跟隨一臺主服務(wù)器,而不能出現(xiàn)一從多主的模式。

第三, 在 Redis 2.8以后的版本里,是采用異步的復(fù)制模式,即進行主從復(fù)制時,不會影響主服務(wù)器上的讀寫數(shù)據(jù)操作。

2 用命令搭建主從集群

這里將用Docker容器來搭建一主二從模式的集群,在配置主從關(guān)系時,需要在從節(jié)點上使用slaveof命令,具體的步驟如下。

第一步,打開一個命令窗口,在其中運行如下命令創(chuàng)建一個名為redis-master的Redis容器,請注意它的端口是6379。

docker run -itd --name redis-master -p 6379:6379 redis:latest

第二步,再新開一個命令窗口,在其中運行如下命令創(chuàng)建一個名為redis-slave1的容器,請注意它的端口是6380。請注意這里是在一臺電腦上運行,所以用端口號來區(qū)別一臺主Redis容器和另外兩臺從Redis容器。如果在真實項目里,多臺Redis會部署在不同的服務(wù)器上,所以可以都用6379端口。

docker run -itd --name redis-slave1 -p 6380:6380 redis:latest

第三步,回到包含redis-master容器的命令窗口,在其中運行docker inspect redis-master命令,查看redis-master容器的信息,在其中能通過IPAddress項看到改容器的IP地址,這里是172.17.0.2。如果在真實項目里,Redis服務(wù)器所在的IP地址是固定的,而通過Docker容器啟動的Redis服務(wù)器的IP地址是動態(tài)的,所以這里要用上述命令來獲取IP地址。

第四步,在redis-master容器的命令窗口里,運行docker exec -it redis-master /bin/bash命令,進入到命令行窗口,在其中用redis-cli命令進入到Redis客戶端命令行后,再通過info replication命令查看當前的主從模式的狀態(tài),能看到如下所示的部分結(jié)果。

 c:\work>docker exec -it redis-master /bin/bash
 root@9433cd584d80:/data# redis-cli
 127.0.0.1:6379> info replication
 # Replication
 role:master
 connected_slaves:0

從第5行的輸出里能看到,當前reids-master容器在主從模式里的角色是“主服務(wù)器”,從第6行的輸出里能看到,當前該主服務(wù)器沒有攜帶從服務(wù)器。

同樣再到redis-slave1容器的命令窗口里,通過docker exec -it redis-slave1 /bin/bash命令進入容器的命令行窗口,也通過redis-cli命令進入客戶端命令行,也再通過info replication命令查看該Redis服務(wù)器的主從模式的狀態(tài),部分結(jié)果如下所示。

 c:\work>docker exec -it redis-slave1 /bin/bash
 root@2e3237c60211:/data# redis-cli
 127.0.0.1:6379> info replication
 # Replication
 role:master
 connected_slaves:0

由于此時還沒有通過命令行設(shè)置主從模式,所以從第5行和第6行的輸出結(jié)果里,依然看到當前服務(wù)器是“主服務(wù)器”,同時沒有攜帶從服務(wù)器。

第五步,在redis-slave1容器的命令窗口里,運行如下的slaveof命令,指定當前Redis服務(wù)器為從服務(wù)器。該命令的格式是slaveof IP地址 端口號,這里是指向172.17.0.2:6379所在的主服務(wù)器。

slaveof 172.17.0.2 6379

運行完該命令后,還是在redis-slave1客戶端里,再次運行info replication,會看到如下所示的部分結(jié)果。從第3行的結(jié)果里能看到,該redis-slave1服務(wù)器已經(jīng)成為從服務(wù)器,并能從第4行和第5行的輸出里能確認,該從服務(wù)器是從屬于172.17.0.2:6379所在的Redis主服務(wù)器。

127.0.0.1:6379> info replication
 # Replication
 role:slave
 master_host:172.17.0.2
 master_port:6379

此時再回到redis-master容器的命令窗口里,在Redis客戶端里再次運行info replication命令查看主從狀態(tài),能看到如下所示的部分結(jié)果。從第4行的輸出里能看到,該Redis主服務(wù)器已經(jīng)攜帶了一個從服務(wù)器。

 127.0.0.1:6379> info replication
 # Replication
 role:master
 connected_slaves:1

第六步,再打開一個新的命令窗口,在其中運行如下命令,開啟一個新的名為redis-slave2的Redis容器,請注意它的端口是6381。

docker run -itd --name redis-slave2 -p 6381:6381 redis:latest

隨后再運行docker exec -it redis-slave2 /bin/bash命令進入該容器的命令行窗口,再通過redis-cli命令進入客戶端,運行slaveof 172.17.0.2 6379命令,把這個Redis服務(wù)器也設(shè)為從服務(wù)器,并連到redis-master這個容器所在的主Redis服務(wù)器上。

連接完成后,再回到redis-master容器所在的命令行窗口,再運行info replication命令,此時能看到如下的部分輸出,從第4行的輸出里能看到,當前該主服務(wù)器連接著兩臺從服務(wù)器。

127.0.0.1:6379> info replication
 # Replication
 role:master
 connected_slaves:2

至此配置完成一主兩從模式的主從模式,此時如果到兩臺從服務(wù)器里運行g(shù)et name命令,返回是空,如果到redis-master容器所在的命令行窗口,在其中運行set name Peter后,再到兩臺從服務(wù)器里運行g(shù)et name命令,就能看到返回值。這說明主從模式配置成功,主服務(wù)器里的數(shù)據(jù)會自動同步到各從服務(wù)器上。

3 通過配置搭建主從集群

在項目里可以用slaveof命令搭建主從模式的集群外,還可以用配置參數(shù)的方式來搭建,具體的步驟如下。

第一步,搭建主服務(wù)器redis-master的命令不變,依然用如下的命令,這里還是用6379端口。

docker run -itd --name redis-master -p 6379:6379 redis:latest

用docker inspect redis-master命令確認該Redis服務(wù)器所在容器的IP地址依然是172.17.0.2。

第二步,到C:\work\redis\redisConf目錄里,創(chuàng)建配置文件redisSlave1.conf,并在其中編寫如下內(nèi)容。

port 6380

slaveof 172.17.0.2 6379

通過第1行的命令,設(shè)置該Redis的端口為6380,通過第2行的slaveof配置,把該Redis服務(wù)器設(shè)置成“從模式”,并連接到redis-master所在的主服務(wù)器上。

第三步,在新的命令窗口里運行如下的命令,創(chuàng)建名為redids-slave1的Redis服務(wù)器。該服務(wù)器的工作端口是6380,并且用redis-server后的參數(shù)指定在啟動Redis服務(wù)器時加載redisSlave1.conf配置文件,

docker run -itd --name redis-slave1 -v C:\work\redis\redisConf:/redisConfig:rw -p 6380:6380 redis:latest redis-server /redisConfig/redisSlave1.conf

隨后再通過docker exec -it redis-slave1 /bin/bash命令進入到該容器的命令行,由于這里Redis工作端口已經(jīng)變成6380,所以需要通過redis-cli -h 127.0.0.1 -p 6380命令來進入Redis客戶端,如果在其中運行info replication命令,能看到如下的部分結(jié)果,由此能進一步確認redis-slave1服務(wù)器已經(jīng)從屬于redis-master服務(wù)器。

 root@80e7ae14a322:/data# redis-cli -h 127.0.0.1 -p 6380
 127.0.0.1:6380> info replication
 # Replication
 role:slave
 master_host:172.17.0.2
 master_port:6379

第四步,到C:\work\redis\redisConf目錄里,創(chuàng)建配置文件redisSlave2.conf,并在其中編寫如下內(nèi)容。

port 6381

slaveof 172.17.0.2 6379

這里用到了6381端口,同樣也通過slaveof命令連接到redis-master服務(wù)器上。隨后在新的命令窗口里運行如下的命令,創(chuàng)建名為redids-slave2的Redis服務(wù)器。該服務(wù)器的工作端口是6381,并且用redis-server后的參數(shù)指定在啟動Redis服務(wù)器時加載redisSlave2.conf配置文件,

docker run -itd --name redis-slave2 -v C:\work\redis\redisConf:/redisConfig:rw -p 6381:6381 redis:latest redis-server /redisConfig/redisSlave2.conf

隨后再通過docker exec -it redis-slave2 /bin/bash命令進入到該容器的命令行,由于這里Redis工作端口已經(jīng)變成6381,所以需要通過redis-cli -h 127.0.0.1 -p 6381命令來進入Redis客戶端,這里可以再通過info replication命令確認配置效果,部分運行結(jié)果如下所示。

root@6017108b97c4:/data# redis-cli -h 127.0.0.1 -p 6381
 127.0.0.1:6381> info replication
 # Replication
 role:slave
 master_host:172.17.0.2
 master_port:6379

至此完成了以配置文件設(shè)置主從復(fù)制集群的設(shè)置,此時如果到主服務(wù)器redis-master所在的客戶端里運行set age 18命令,再到redis-slave1和redis-slave2這兩臺從服務(wù)器里運行g(shù)et age命令,能看到age的值,由此能再次確認主從服務(wù)器之間能同步數(shù)據(jù)。

4 配置讀寫分離效果

如果在上文里配置的redis-slave1和redis-slave2這兩臺從服務(wù)器里,運行info replication命令,還能看到“slave_read_only:1”這項配置,說明從服務(wù)器默認是“只讀”的,如果到redis-slave1的Redis客戶端命令行里輸入set val 1,會看到如下第2行所示的錯誤,從而能進一步驗證該Redis服務(wù)器的“只讀”屬性。

127.0.0.1:6380> set val 1

(error) READONLY You can't write against a read only replica.

對于Redis從服務(wù)器而言,建議采用默認的“只讀”配置,因為在項目里,一般不會向作為數(shù)據(jù)同步目的地的“從服務(wù)器”上寫數(shù)據(jù)。如果業(yè)務(wù)上確實需要,可以通過如下的步驟設(shè)置“可讀可寫”的效果。

第一步,在上文提到的redisSlave2.conf配置文件里再加入一行“slave-read-only no”的配置,指定該服務(wù)器可讀可寫。

第二步,如果上文提到的redis-slave2容器還處于活動狀態(tài),則需要先用docker stop redis-slave2停止該容器,隨后再用docker rm redis-slave2命令刪除該容器,之后可以再用如下的命令再次創(chuàng)建redis-slave2容器。

docker run -itd --name redis-slave2 -v C:\work\redis\redisConf:/redisConfig:rw -p 6381:6381 redis:latest redis-server /redisConfig/redisSlave2.conf

在redis-server命令后所帶的redisSlave2.conf配置文件里,已經(jīng)用“slave-read-only no”配置項設(shè)置了“可讀可寫”的模式。

第三步,再通過docker exec -it redis-slave2 /bin/bash命令進入到該容器的命令行,再通過redis-cli -h 127.0.0.1 -p 6381命令進入Redis客戶端, 此時如果再運行set val 1命令,就能成功寫入數(shù)據(jù)。

5 用心跳機制提升主從復(fù)制可靠性

在Redis主從復(fù)制模式里,如果主從服務(wù)器之間有數(shù)據(jù)同步的情況,那么從服務(wù)器會默認以一秒一次的頻率,向主服務(wù)器發(fā)送REPLCONF ACK命令,依次來確保兩者間連接通暢。這種定時交互命令確保連接的機制就叫“心跳”機制。在上文開啟的redis-master這個主服務(wù)器的命令行里,如果運行info replication命令,能看到它從屬服務(wù)器的“心跳”狀況。

 127.0.0.1:6379> info replication
 2 # Replication
 3 role:master
 4 connected_slaves:2
 5 slave0:ip=172.17.0.3,port=6380,state=online,offset=16185,lag=1
 6 slave1:ip=172.17.0.4,port=6381,state=online,offset=16185,lag=1

其中在第5行和第6行里,能通過lag表示該從屬服務(wù)器發(fā)送REPLCONF ACK命令的時間,這里均是1秒,這表示兩臺從服務(wù)器和主服務(wù)器的連接均屬通暢。

這里大家可以想象下,如果從服務(wù)器宕機,那么主從復(fù)制就沒有意義了。對此,可以通過如下的步驟來關(guān)聯(lián)心跳機制和主動復(fù)制的動作。

第一步,在C:\work\redis\redisConf目錄里新建redisMaster.conf文件,在其中編寫如下的代碼。

min-slaves-to-write 2

min-slaves-max-lag 15

第1行的參數(shù)表示實現(xiàn)主從復(fù)制的從服務(wù)器個數(shù)最少是2臺,第2行的參數(shù)表示,如果有第1行參數(shù)指定的從服務(wù)器個數(shù)(這里是2臺)的心跳延遲時間(即lag值)大于15秒,不執(zhí)行主從復(fù)制。

這兩個條件是“或者”的關(guān)系,即只要出現(xiàn)從服務(wù)器個數(shù)小于2,或者2臺從服務(wù)器的心跳延遲時間大于15秒,主服務(wù)器即停止主從復(fù)制的操作。

第二步,通過如下的命令啟動redis-master容器,由于此時啟動Redis服務(wù)器時已經(jīng)加載了上述配置,所以該Redis主服務(wù)器在執(zhí)行主從復(fù)制時,會檢測第一步所設(shè)置的條件。從而能提升主從復(fù)制的可靠性。

docker run -itd --name redis-master -v C:\work\redis\redisConf:/redisConfig:rw -p 6379:6379 redis:latest redis-server /redisConfig/redisMaster.conf

6 用偏移量檢查數(shù)據(jù)是否一致

在上文開啟的redis-master主服務(wù)器的命令行里,如果運行info replication命令,還能看到表示復(fù)制數(shù)據(jù)偏移量的master_repl_offset數(shù)據(jù),效果如下第6行所示。這里數(shù)據(jù)是276,表示主服務(wù)器向從服務(wù)器發(fā)送數(shù)據(jù)的字節(jié)數(shù)。

127.0.0.1:6379> info replication
 # Replication
 role:master
 connected_slaves:1
 …
 master_repl_offset:276

同樣如果到redis-slave1從服務(wù)器的命令行里,也能通過info replication查看該偏移量,效果如下第7行所示。

127.0.0.1:6380> info replication
 # Replication
 role:slave
 master_host:172.17.0.2
 master_port:6379
 …
 slave_repl_offset:276

在從服務(wù)器里,該數(shù)據(jù)表示從主服務(wù)器中接收到的數(shù)據(jù)字節(jié)數(shù),如果主從服務(wù)器中兩者數(shù)據(jù)一致,這說明主從服務(wù)器間的數(shù)據(jù)是同步的。

當在主服務(wù)器redis-master里運行set nextVal 1命令后,再用info replication查看master_repl_offset數(shù)值,會發(fā)現(xiàn)有變化,而此時再到redis-slave1從服務(wù)器運行info replication命令,會發(fā)現(xiàn)從服務(wù)器的master_repl_offset數(shù)值依然和主服務(wù)器一致,這說明用set nextVal 1命令在主服務(wù)器里增加的數(shù)據(jù)已經(jīng)成功同步到從服務(wù)器。也就是說,如果出現(xiàn)Redis問題,可以通過master_repl_offset數(shù)值來檢查同步數(shù)據(jù)是否正確,由此再進一步排查問題。

總結(jié)

到此這篇關(guān)于使用Docker搭建Redis主從復(fù)制的集群的文章就介紹到這了,更多相關(guān)Docker搭建Redis主從復(fù)制的集群內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!

標簽:衡水 晉中 安陽 畢節(jié) 云南 佛山 巴中 南寧

巨人網(wǎng)絡(luò)通訊聲明:本文標題《使用Docker搭建Redis主從復(fù)制的集群》,本文關(guān)鍵詞  使用,Docker,搭建,Redis,主從,;如發(fā)現(xiàn)本文內(nèi)容存在版權(quán)問題,煩請?zhí)峁┫嚓P(guān)信息告之我們,我們將及時溝通與處理。本站內(nèi)容系統(tǒng)采集于網(wǎng)絡(luò),涉及言論、版權(quán)與本站無關(guān)。
  • 相關(guān)文章
  • 下面列出與本文章《使用Docker搭建Redis主從復(fù)制的集群》相關(guān)的同類信息!
  • 本頁收集關(guān)于使用Docker搭建Redis主從復(fù)制的集群的相關(guān)信息資訊供網(wǎng)民參考!
  • 推薦文章