Keepalived实现双机Nginx高可用

Keepalived是一个用C编写的路由软件，它能检测服务器的状态并且自动地切换可用服务器。

1. 双机nginx架构（无keepalived）

---

• 准备两台服务器
• 分别在服务器上安装nginx
• 在两个nginx上配置一样的应用服务列表
• 负载均衡分流到两台服务器上

如图：

双机nginx架构图

当用户访问负载均衡的时候，LB会自动选择转发到两台服务器的其中一个。这样有效地进行了分流，降低了流量增大导致服务器压力剧增的风险。

这种架构有一个严重的问题：

• 当其中一个服务器上的nginx挂掉以后，负载均衡还是会有很大的机率会转发流量到挂掉的服务器上，导致请求无响应。

为了解决该问题，可用引入keepalived

2. 双机nginx架构（keepalived双主模式）

---

如图：

“1731552642372_.pic_hd”的副本.jpg

有以下几点要注意：

1. 负载均衡绑定的两个ip是keepalived提供出来的虚拟ip。分别是192.168.1.6 、192.168.1.7

2. 服务器上实际ip为

   • A服务器 ： 192.168.1.2
   • B服务器 ： 192.168.1.3

3. keepalived 会不断地判断本地nginx是否工作，如果本机nginx停止工作，keepalived会将请求跳转到两外一台机器上

4. 达到的效果：

   • 服务器A、B都正常 ：
     x请求->负载均衡->192.168.1.6->192.168.1.2
     y请求->负载均衡->192.168.1.7->192.168.1.3

   • 服务器A异常，服务器B正常 ：
     x请求->负载均衡->192.168.1.6->192.168.1.7->192.168.1.3
     y请求->负载均衡->192.168.1.7->192.168.1.3

   • 服务器A正常，服务器B异常 ：
     x请求->负载均衡->192.168.1.6->192.168.1.2
     y请求->负载均衡->192.168.1.7->192.168.1.6->192.168.1.2

   • 当异常服务器重新启动时，路由自动恢复，无需人工干扰。

3. keepalived 安装与配置

---

分别在服务器A和服务器B上安装keepalived

➜ sudo apt-get install build-essential libssl-dev ##安装编译环境  ➜ root@ubuntu: cd ~
➜ wget http://www.keepalived.org/software/keepalived-1.2.19.tar.gz
➜ tar xzvf keepalived*
➜ cd keepalived*
➜ ./configure
➜ make
➜ sudo make install
➜ cp /usr/local/etc/keepalived/ /etc/keepalived/keepalived.conf 

nginx检查脚本 : nginx_check.sh

#!/bin/bash
A=`ps -C nginx –no-header |wc -l`
if [ $A -eq 0 ];then
    /usr/sbin/nginx
    sleep 2
    if [ `ps -C nginx --no-header |wc -l` -eq 0 ];then
        killall keepalived
    fi
fi

授权脚本： chmod +x /etc/keepalived/nginx_check.sh

修改keepalived配置文件（服务器A）

! Configuration File for keepalived  
# 集群资源监控，组合track_script进行  
vrrp_script check_haproxy {  
  script "/etc/keepalived/nginx_check.sh"  #检测 nginx 状态的脚本路径
  interval 2  #检测时间间隔
  weight -20  #条件成立 权重减20
}  
vrrp_instance HAPROXY_HA {  
  # 设置当前主机为主节点，如果是备用节点，则设置为BACKUP 
  state MASTER  
  # 指定HA监测网络接口，可以用ifconfig查看来决定设置哪一个  
  interface eth1
  # 虚拟路由标识，同一个VRRP实例要使用同一个标识，主备机  
  virtual_router_id 80  
  # 设置优先级，确保主节点的优先级高过备用节点
  priority 100  
  # 用于设定主备节点间同步检查时间间隔  
  advert_int 2  
  # 设置主备节点间的通信验证类型及密码，同一个VRRP实例中需一致  
  authentication {  
    auth_type PASS  
    auth_pass 1234  
  }  
  # 集群资源监控，组合vrrp_script进行  
  track_script {  
    check_haproxy  
  }  
  # 设置虚拟IP地址，当keepalived状态切换为MASTER时，此IP会自动添加到系统中  
  # 当状态切换到BACKUP时，此IP会自动从系统中删除  
  # 可以通过命令ip add查看切换后的状态  
  virtual_ipaddress {  
    192.168.1.6  #虚拟ip配置完之后就用它访问  
  }  
}

vrrp_instance HAPROXY_HA2 {  
  # 设置当前主机为主节点，如果是备用节点，则设置为BACKUP 
  state BACKUP  
  # 指定HA监测网络接口，可以用ifconfig查看来决定设置哪一个  
  interface eth1  
  # 虚拟路由标识，同一个VRRP实例要使用同一个标识，主备机  
  virtual_router_id 81  
  # 设置优先级，确保主节点的优先级高过备用节点
  priority 90  
  # 用于设定主备节点间同步检查时间间隔  
  advert_int 2  
  # 设置主备节点间的通信验证类型及密码，同一个VRRP实例中需一致  
  authentication {  
    auth_type PASS  
    auth_pass 1234  
  }  
  # 集群资源监控，组合vrrp_script进行  
  track_script {  
    check_haproxy  
  }  
  # 可以通过命令ip add查看切换后的状态  
  virtual_ipaddress {  
    192.168.1.7  #虚拟ip配置完之后就用它访问  
  }  
}

修改keepalived配置文件（服务器B）

! Configuration File for keepalived  
# 集群资源监控，组合track_script进行  
vrrp_script check_haproxy {  
  script "/etc/keepalived/nginx_check.sh"  #检测 nginx 状态的脚本路径
  interval 2  #检测时间间隔
  weight -20  #条件成立 权重减20
}  
vrrp_instance HAPROXY_HA {  
  # 设置当前主机为主节点，如果是备用节点，则设置为BACKUP 
  state BACKUP  
  # 指定HA监测网络接口，可以用ifconfig查看来决定设置哪一个  
  interface eth1
  # 虚拟路由标识，同一个VRRP实例要使用同一个标识，主备机  
  virtual_router_id 80  
  # 设置优先级，确保主节点的优先级高过备用节点
  priority 100  
  # 用于设定主备节点间同步检查时间间隔  
  advert_int 2  
  # 设置主备节点间的通信验证类型及密码，同一个VRRP实例中需一致  
  authentication {  
    auth_type PASS  
    auth_pass 1234  
  }  
  # 集群资源监控，组合vrrp_script进行  
  track_script {  
    check_haproxy  
  }  
  # 设置虚拟IP地址，当keepalived状态切换为MASTER时，此IP会自动添加到系统中  
  # 当状态切换到BACKUP时，此IP会自动从系统中删除  
  # 可以通过命令ip add查看切换后的状态  
  virtual_ipaddress {  
    192.168.1.6  #虚拟ip配置完之后就用它访问  
  }  
}

vrrp_instance HAPROXY_HA2 {  
  # 设置当前主机为主节点，如果是备用节点，则设置为BACKUP 
  state MASTER  
  # 指定HA监测网络接口，可以用ifconfig查看来决定设置哪一个  
  interface eth1  
  # 虚拟路由标识，同一个VRRP实例要使用同一个标识，主备机  
  virtual_router_id 81  
  # 设置优先级，确保主节点的优先级高过备用节点
  priority 90  
  # 用于设定主备节点间同步检查时间间隔  
  advert_int 2  
  # 设置主备节点间的通信验证类型及密码，同一个VRRP实例中需一致  
  authentication {  
    auth_type PASS  
    auth_pass 1234  
  }  
  # 集群资源监控，组合vrrp_script进行  
  track_script {  
    check_haproxy  
  }  
  # 可以通过命令ip add查看切换后的状态  
  virtual_ipaddress {  
    192.168.1.7  #虚拟ip配置完之后就用它访问  
  }  
}

启动keepalived:

➜ keepalived
➜ ps -ef|grep keepalived #查看是否运行中
➜ pkill keepalived #手动关掉进程