臨時接到一個測試任務,而測試需要用到redis-cluster環境,卻沒有現成的環境可用,于是只能自力更生搭建測試環境。一開始想采用在宿主機上硬搭,但苦于沒有那么多的服務器,于是決定試試Docker。
以下為詳細搭建步驟:
0 1
基礎環境信息
基礎環境如下所示:
centos linux release 7.5.1804
Docker version 18.09.4
以下操作均在root用戶下面操作,如果是非root用戶,需要在各命令前面添加sudo。
0 2
搭建步驟
1、下載redis鏡像
dockerpull redis
如果需要拉取指定版本,需要在redis后面添加版本號,如果不指定則拉取最新版本鏡像,可以使用docker search redis來搜索鏡像。
查看本地鏡像,可以使用命令docker images。
2、創建虛擬網卡
創建虛擬網卡,主要是用于redis-cluster能于外界進行網絡通信,一般常用橋接模式。
dockernetwork create redis-net
查看docker的網卡信息,可使用命令docker network ls
查看dockerr網絡詳細信息,可使用命令docker network inspect redis-net
3、創建redis配置文件模板
mkdir-p /home/redis-clustercd/home/redis-clustervimredis-cluster.tmpl
在redis-cluster.tmpl中輸入以下內容
port${PORT}cluster-enabled yescluster-config-file nodes.confcluster-node-timeout 5000cluster-announce-ip 192.168.168.131cluster-announce-port ${PORT}cluster-announce-bus-port 1${PORT}Appendonly yes
各節點解釋如下所示:
- port:節點端口,即對外提供通信的端口
- cluster-enabled:是否啟用集群
- cluster-config-file:集群配置文件
- cluster-node-timeout:連接超時時間
- cluster-announce-ip:集群各節點IP地址
- cluster-announce-port:集群節點映射端口
- cluster-announce-bus-port:集群總線端口
- appendonly:持久化模式
cluster-announce-ip:這個IP需要特別注意一下,如果要對外提供訪問功能,需要填寫宿主機的IP,如果填寫docker分配的IP(172.x.x.x),可能會導致部分集群節點在跳轉時失敗。
4、創建節點配置文件
在redis-cluser中執行以下命令
forport in$(seq 8010 8015); domkdir -p ./ ${port}/conf && PORT= ${port}envsubst < ./redis-cluster.tmpl > ./ ${port}/conf/redis.conf && mkdir -p ./ ${port}/data; done
驗證上述命令執行的結果是否正確
5、創建redis節點容器
執行以下命令即可
forport in$(seq 8010 8015); dodocker run -it -d -p ${port}: ${port}-p 1 ${port}:1 ${port}--privileged= true-v /home/redis-cluster/ ${port}/conf/redis.conf:/usr/ local/etc/redis/redis.conf --privileged= true-v /home/redis-cluster/ ${port}/data:/data --restart always --name redis- ${port}--net redis-net --sysctl net.core.somaxconn=1024 redis redis-server /usr/ local/etc/redis/redis.conf; done
驗證容器是否創建成功
查看docker給每個節點分配的IP信息
6、創建redis-cluster集群
進入一個容器節點
docker exec-it redis-8010 bash
在進入容器后,執行以下命令:
cd/usr/local/bin/ redis-cli --cluster create 192.168.168.131:8010192.168.168.131:8011192.168.168.131:8012192.168.168.131:8013192.168.168.131:8014192.168.168.131:8015
出現選擇提示信息,輸入yes,結果如下所示:
7、連接redis-cluster,并添加數據到redis
在節點8010中輸入以下命令
redis-cli-c-h192 .168.168.131-p8010
8、驗證集群是否可以任意地方訪問
以下驗證是基于windows版本的redis。其下載地址如下:https://github.com/microsoftarchive/redis/releases
在Windows中驗證的結果如下所示:
0 3
搭建中遇到的問題
1、所有都搭建完成后,在創建redis-cluster時一直報錯
CouldnotconnecttoRedisat192 .168.168.131:8010: Noroutetohost
這個原因是因為宿主機的防火墻未關,導致相應的端口被阻止,創建的時候臨時關閉防火墻,后面再允許相應的端口即可。
2、在成功創建完redis-cluster后,可以成功連接,但在獲取值時,一直處于跳轉中,導致最終出現TTL exhaust
-> Redirectedtoslot[15495]locatedat172 .18.0.7:8015
這種情況通常是因為在前面寫配置文件,將cluster-announce-ip寫成了docker分配的IP,只需要將該IP換為宿主機的IP即可。
0 4
其他參考
在搭建過程,可能在出現問題后,需要停止或直接刪除docker容器,可以使用以下參考命令。
批量停止docker 容器:
dockerps -a | grep -i "redis-801*"| awk '{print $1}' | xargs docker stop
批量刪除docker 容器:
dockerps -a | grep -i "redis-801*"| awk '{print $1}' | xargs docker rm -f
批量刪除文件
rm-rf 801{0..5}/conf/redis.conf
以上就是基于docker搭建redis-cluster的簡單步驟,實際應用中可能并沒有這么簡單,該文也僅用于參考。