首页 > 代码库 > 使用keepalived打造redis双机热备

使用keepalived打造redis双机热备

redis是非常实用的优秀nosql开源产品,在高并发的服务器环境中,可以作为缓存和队列使用.美中不足的是,到现在为止,redis并没有推出自己的集群方案,对一个完善的生产环境,负载均衡,高可用,主从备份都是必不可少的选项,redis提供了稳定·的主从备份功能,提供了数种持久化策略,在主从备份上也提供了增量备份的功能,现在通过sentinel提供主从热备的功能,可惜功能上并不完善,达不到生产环境的要求。

现在我们选定keepalived作为redis的高可用支持,keepalived不仅可以比较完善的支持redis的高可用,而且作为lvs负载均衡的配套产品,和lvs天然具有较好的配合,对于搭建redis集群有较好的扩展性。

redis和keepalived的安装非常简单,网上大把的文章可以参考,这里就不再赘述,这里按照redis双机主从热备的场景,讲需要注意的几点,网上的很多文章没有讲清楚。

1,lvs和keepalived的关系,lvs起的是负载均衡功能,而keepalived则是高可用(热备)的支持,keeplaived可以单独使用。

2,keepalived通过VIP虚拟ip的绑定转换来打造热备支持,在转化主从身份的过程中,还支持脚本的调用,根据不同的脚本,keepalived可以用于不同的场景要求,可谓功能强

3,centos环境中keepalived的使用需要安装ipvsadm支持。

4,如果负载均衡使用的是nat策略,那么可以不设置linux的arp_ignore(arp组播忽略)选项。

5,/etc/sysconfig/keeaplived 为keepalived的启动脚本,这个可以不用修改,如果keepalived的启动配置不在/etc/keepalived/keepalived.conf下则需要在这里指定配置文件的位置

  /etc/keepalived/keepalived.conf为kaapalived的默认配置文件所在位置

  /var/log/messages中记载了keepalived的启动,vip转化等log信息,至于角色转化过程中的脚本执行日志,由各个脚本自己指定

 

下面贴出主从的keepalived.conf设置,在centos7下测试通过

主机keepalived.conf

! Configuration File for keepalivedglobal_defs {   notification_email {     acassen@firewall.loc     failover@firewall.loc     sysadmin@firewall.loc   }   notification_email_from Alexandre.Cassen@firewall.loc   smtp_server 128.0.0.1   smtp_connect_timeout 30   router_id LVS_MASTER}vrrp_script chk_redis {      script "/usr/local/redis/sh/redis_check.sh 127.0.0.1 6379"      interval 2      timeout 2     fall 3}vrrp_instance VI_1 {    state MASTER    interface eno16777736    virtual_router_id 60    priority 100    advert_int 3    authentication {        auth_type PASS        auth_pass 1111    }    virtual_ipaddress {        192.168.72.115       # 192.168.200.17       # 192.168.200.18    }     track_script {        chk_redis    }    notify_master "/usr/local/redis/sh/redis_master_master.sh 127.0.0.1 192.168.72.128 6379"    notify_backup "/usr/local/redis/sh/redis_master_slave.sh 127.0.0.1 192.168.72.128 6379"    notify_fault "/usr/local/redis/sh/redis_fault.sh" }virtual_server 192.168.72.115 6379 {    delay_loop 6    lb_algo rr    lb_kind NAT    nat_mask 255.255.255.0    persistence_timeout 50    protocol TCP    sorry_server 127.0.0.1 80    real_server 192.168.72.11 6379 {        weight 1    TCP_CHECK {          connect_timeout 3          nb_get_retry 3          delay_before_retry 3          connect_port 6379        }    }   real_server 192.168.72.128 6379 {        weight 1        TCP_CHECK {          connect_timeout 3          nb_get_retry 3          delay_before_retry 3          connect_port 6379        }    }}

从机的keepalived.conf配置

! Configuration File for keepalivedglobal_defs {   notification_email {     acassen@firewall.loc     failover@firewall.loc     sysadmin@firewall.loc   }   notification_email_from Alexandre.Cassen@firewall.loc   smtp_server 128.0.0.1   smtp_connect_timeout 30   router_id LVS_BACKUP}vrrp_script chk_redis {      script "/usr/local/redis/sh/redis_check.sh 127.0.0.1 6379"      interval 2      timeout 2     fall 3}vrrp_instance VI_1 {    state BACKUP    interface eno16777736    virtual_router_id 60    priority 99    advert_int 3    nopreempt    authentication {        auth_type PASS        auth_pass 1111    }    virtual_ipaddress {        192.168.72.115       # 192.168.200.17       # 192.168.200.18    }     track_script {        chk_redis    }    notify_master "/usr/local/redis/sh/redis_backup_master.sh 127.0.0.1 192.168.72.11 6379"    notify_backup "/usr/local/redis/sh/redis_backup_slave.sh 127.0.0.1 192.168.72.11 6379"    notify_fault "/usr/local/redis/sh/redis_fault.sh" }virtual_server 192.168.72.115 6379 {    delay_loop 6    lb_algo rr    lb_kind NAT    nat_mask 255.255.255.0    persistence_timeout 50    protocol TCP    sorry_server 127.0.0.1 80    real_server 192.168.72.11 6379 {        weight 1    TCP_CHECK {          connect_timeout 3          nb_get_retry 3          delay_before_retry 3          connect_port 6379        }    }   real_server 192.168.72.128 6379 {        weight 1        TCP_CHECK {          connect_timeout 3          nb_get_retry 3          delay_before_retry 3          connect_port 6379        }    }}

 

请大家注意几点:

1,同一组里的各个机器配置文件中router_id不能相同,很多文章讲这里可以相同是错误的,这个是组中身份的标识。同一个组里的virtual_router_id必须相同,这是组标识。

2,priority是设置优先级别的,主服务器的优先级必须高于从服务器,即这个数字要大些。

3,interface后跟的是网卡名,在centos7中可不叫eth0,最好在配置之前使用ifconfig查看下你的网卡名称。

4,real_server中的weight设置的是负载均衡优先级,如果主从热备的场景下,这里可以设置为相同。

 

keeaplived可以在主从都运行良好的情况下检测主从状态,当主服务器down掉,或者进程意外终止时,先将VIP绑定到从服务器上,然后通过指定的脚本来提升从服务器的应用层面的角色定位,在redis中就是运行slave no one,当主服务器恢复服务后,将VIP恢复绑定至主服务器,然后调用脚本同步主服务器宕机时间中从服务器储存的数据,然后将主服务器redis进程提升为主redis,从服务器redis降格为备份进程。这些功能的实现都是通过主动调用notify_master脚本实现,这个脚本当然可以配置为其他的功能,所以,这就可以使keepalived在很多场合发挥作用。

使用keepalived打造redis双机热备