docker-compose部署redis三主三从集群

d_hero
发布于 2023-6-29 14:00
浏览
0收藏

本次是两台主机,搭建 3主 3从的 redis 集群,使用 docker-compose 部署。

服务器规划

服务器ip

实例

端口

10.100.232.171

redis_6379,redis_6380,redis_6381

6379,6380,6381

10.100.232.172

redis_6379,redis_6380,redis_6381

6379,6380,6381

服务器:10.100.232.171

创建基础配置文件

1,创建 redis 挂载目录:

# 递归创建 docker、redis 目录  
mkdir -p /docker/redis

# 进入 redis 目录下
cd /docker/redis

2,创建 redis 集群模板配置文件:

vi redis-cluster.tmpl

模板配置文件内容:

bind 0.0.0.0
# redis端口
port ${PORT}
tcp-backlog 511
timeout 0
tcp-keepalive 300
supervised no
pidfile /var/run/redis_${PORT}.pid
databases 16
always-show-logo yes
save 900 1
save 300 10
save 60 10000
stop-writes-on-bgsave-error yes
rdbcompression yes
rdbchecksum yes
dbfilename dump.rdb
slave-serve-stale-data yes
slave-read-only yes
repl-diskless-sync no
repl-diskless-sync-delay 5
dir /data/
repl-disable-tcp-nodelay no
slave-priority 100
maxclients 60000
lazyfree-lazy-eviction no
lazyfree-lazy-expire no
lazyfree-lazy-server-del no
slave-lazy-flush no
#redis 访问密码
requirepass 123456
#redis 访问Master节点密码
masterauth 123456
# 关闭保护模式
protected-mode no
# 开启集群
cluster-enabled yes
# 集群节点配置
cluster-config-file nodes_${PORT}.conf
# 超时
cluster-node-timeout 5000
# 集群节点IP host模式为宿主机IP
cluster-announce-ip 10.100.232.171
# 集群节点端口 6391 - 6396
cluster-announce-port ${PORT}
cluster-announce-bus-port 1${PORT}
# 开启 appendonly 备份模式
appendonly yes
appendfilename "appendonly.aof"
# 每秒钟备份
appendfsync everysec
# 对aof文件进行压缩时,是否执行同步操作
no-appendfsync-on-rewrite no
# 当目前aof文件大小超过上一次重写时的aof文件大小的100%时会再次进行重写
auto-aof-rewrite-percentage 100
# 重写前AOF文件的大小最小值 默认 64mb
auto-aof-rewrite-min-size 64mb
aof-load-truncated yes
aof-use-rdb-preamble no
lua-time-limit 5000
slowlog-log-slower-than 10000
slowlog-max-len 128
latency-monitor-threshold 0
notify-keyspace-events ""
hash-max-ziplist-entries 512
hash-max-ziplist-value 64
list-max-ziplist-size -2
list-compress-depth 0
set-max-intset-entries 512
zset-max-ziplist-entries 128
zset-max-ziplist-value 64
hll-sparse-max-bytes 3000
activerehashing yes
client-output-buffer-limit normal 0 0 0
client-output-buffer-limit slave 256mb 64mb 60
client-output-buffer-limit pubsub 32mb 8mb 60
hz 10
aof-rewrite-incremental-fsync yes
# 日志配置
# debug:会打印生成大量信息,适用于开发/测试阶段
# verbose:包含很多不太有用的信息,但是不像debug级别那么混乱
# notice:适度冗长,适用于生产环境
# warning:仅记录非常重要、关键的警告消息
loglevel notice
# 日志文件路径
logfile "/data/redis.log"
  • port:节点端口号;
  • requirepass:对登录权限做限制,redis每个节点的requirepass可以是独立、不同的,建议 redis启用密码时将各个节点masterauth和requirepass设置为相同的密码,降低运维成本;
  • masterauth:如果主节点开启了访问认证,从节点访问主节点需要认证,主要是针对master对应 的slave节点设置的,在slave节点数据同步的时候用到;
  • protected-mode:保护模式,默认值 yes,即开启。开启保护模式以后,需配置 bind ip 或者设 置访问密码;关闭保护模式,外部网络可以直接访问;
  • daemonize:是否以守护线程的方式启动(后台启动),默认no;
  • appendonly:是否开启 AOF 持久化模式,默认 no;
  • cluster-enabled:是否开启集群模式,默认 no;
  • cluster-config-file:集群节点信息文件;
  • cluster-node-timeout:集群节点连接超时时间;
  • cluster-announce-ip:集群节点 IP,填写宿主机的 IP(内网ip);
  • cluster-announce-port:集群节点映射端口;
  • cluster-announce-bus-port:集群节点总线端口。

3,循环生成节点目录和配置文件

for port in `seq 6379 6381`; 
do \
mkdir -p redis_${port}/conf \
&& PORT=${port} envsubst <redis-cluster.tmpl> redis_${port}/conf/redis.conf \
&& mkdir -p redis_${port}/data;\
done

也可以直接在redis-cluster.tmpl所在的目录下,直接执行就行,直接在命令行中执行

docker-compose部署redis三主三从集群-鸿蒙开发者社区

4,tree 命令查看生成后的目录结构:

tree 命令安装:

yum install -y tree

目录结构:

docker-compose部署redis三主三从集群-鸿蒙开发者社区

确认一下生成的配置文件在 copy 过程中有没有丢失字符

docker-compose部署redis三主三从集群-鸿蒙开发者社区

docker-compose 构建 redis 容器

安装 docker-compose 并赋予执行权限(已安装可以略过)

# 安装命令
sudo curl -L https://get.daocloud.io/docker/compose/releases/download/1.22.0/docker-compose-`uname -s`-`uname -m` -o /usr/local/bin/docker-compose

# 授权:
chmod +x /usr/local/bin/docker-compose

创建 docker-compose.yml 配置文件:

# 进入 /docker/redis 目录下
cd /docker/redis

# 创建 docker-compose.yml 文件
vi docker-compose.yml

文件内容(本次构建使用的镜像是 redis:latest,单主机构建三个节点):

version: "3.1"
services:
  redis-node1:
    image: redis:latest # 基础镜像
    container_name: redis_6379 # 容器名称
    ports: # 映射端口,对外提供服务
      - 6379:6379 # redis的服务端口
      - 16379:16379 # redis集群监控端口
    stdin_open: true # 标准输入打开
    tty: true # 后台运行不退出
    network_mode: host # 使用host模式 必须 共享宿主机IP
    privileged: true # 拥有容器内命令执行的权限
    restart: always
    volumes:
      - /opt/docker/redis/redis_6379/conf/redis.conf:/config/redis.conf # 配置文件目录映射到宿主机
      - /opt/docker/redis/redis_6379/data:/data # 数据文件目录映射到宿主机
    command: [ "redis-server", "/config/redis.conf" ] # 设置服务默认的启动命令
  redis-node2:
    image: redis:latest
    container_name: redis_6380
    ports:
      - 6380:6380
      - 16380:16380
    stdin_open: true
    tty: true
    network_mode: host
    privileged: true
    restart: always
    volumes:
      - /opt/docker/redis/redis_6380/conf/redis.conf:/config/redis.conf
      - /opt/docker/redis/redis_6380/data:/data
    command: [ "redis-server", "/config/redis.conf" ]
  redis-node3:
    image: redis:latest
    container_name: redis_6381
    ports:
      - 6381:6381
      - 16381:16381
    stdin_open: true
    tty: true
    network_mode: host
    privileged: true
    restart: always
    volumes:
      - /opt/docker/redis/redis_6381/conf/redis.conf:/config/redis.conf
      - /opt/docker/redis/redis_6381/data:/data
    command: [ "redis-server", "/config/redis.conf" ]

构建 redis 容器:

# 在放置 docker-compose.yml 文件的目录下执行
docker-compose -f docker-compose.yml up -d

执行成功结果:

docker-compose部署redis三主三从集群-鸿蒙开发者社区

防火墙开放端口

防火墙相关命令:

# 查看防火墙运行状态
firewall-cmd --state

# 开启防火墙
systemctl start firewalld.service

#关闭防火墙
systemctl stop firewalld.service

开放端口号:

firewall-cmd --add-port=6379/tcp --permanent
firewall-cmd --add-port=6380/tcp --permanent
firewall-cmd --add-port=6381/tcp --permanent
firewall-cmd --add-port=16379/tcp --permanent
firewall-cmd --add-port=16380/tcp --permanent
firewall-cmd --add-port=16381/tcp --permanent
firewall-cmd --reload

服务器:10.100.232.172

同步服务器:10.100.232.172的步骤,接下来在该服务器主机上重复操作上面的步骤(记得改配置文件中的IP ),修改 redis-cluster.tmpl 的 IP

cluster-announce-ip 10.100.232.171 改为 cluster-announce-ip 10.100.232.172
搭建集群

进入任意一个容器

# 进入容器(redis_6379)内部
docker exec -it redis_6379 /bin/bash

# 切换到 /usr/local/bin 路径下
cd /usr/local/bin

执行命令创建集群(--cluster-replicas 1 代表一个master拥有一个slave )

redis-cli -a 123456 --cluster create \
10.100.232.171:6379 \
10.100.232.171:6380 \
10.100.232.171:6381 \
10.100.232.172:6379 \
10.100.232.172:6380 \
10.100.232.172:6381 \
--cluster-replicas 1

集群搭建成功:

docker-compose部署redis三主三从集群-鸿蒙开发者社区

查看下集群的信息

redis-cli -h 10.100.232.171 -p 6379 -a 123456 cluster nodes

docker-compose部署redis三主三从集群-鸿蒙开发者社区

控制台客户端连接下看看

docker-compose部署redis三主三从集群-鸿蒙开发者社区

docker-compose部署redis三主三从集群-鸿蒙开发者社区

搭建完成,自己去试试吧




文章转载自公众号:IT学习道场

分类
已于2023-6-29 14:00:48修改
收藏
回复
举报
回复
    相关推荐