Nginx（八）-- Nginx+keepalived实现高可用

2020-05-28 00:00:00 设置 服务器 配置 端口 权重


一、keepalived简介

1. 什么是keepalived

基于VRRP（虚拟路由器冗余协议）来实现对web服务的高可用方案。

keepalived下载地址：http://download.csdn.net/detail/u010821757/9892484

2.安装keepalived服务器

1.将keepalived-1.3.4.zip解压到/usr/java目录

  1. unzip keepalived-1.3.4.zip

2.进入到keepalived

  1. cd keepalived

3.编译安装

  1. ./conf　按 Tab键提示不出来，不能自动补全

4.发现没有权限，接下来就要赋权

  1. chmod +x configure

5.在/usr/java中创建一个文件夹 keepalived

  1. mkdir keepalived

6.进入 keepalived-1.3.4文件夹中，然后编译安装

  1. ./configure --prefix=/usr/java/keepalived --sysconf=/etc

说明：当keepalived启动的时候，会默认读取 etc下的keepalived.conf，所以安装的时候就指向/etc

7.执行6的时候，可能会出现缺少依赖openssl，解决方法，安装openssl

  1. yum install openssl-devel

8.安装

  1. make && make install

出现上图，表示安装成功！

9.设置成系统服务

1) 进入到源码包，即 /usr/java/keepalived-1.3.4

2) 建立软连接（相当于快捷方式）

2.1) 把启动脚本添加到系统/sbin中，

  1. ln -s /usr/java/keepalived/sbin/keepalived /sbin

2.2) 复制源码路径中的keepalived复制到/etc/init.d中：

  1. cp /usr/java/keepalived-1.3.4/keepalived/etc/init.d/keepalived /etc/init.d/

3) 添加到系统服务中

  1. chkconfig --add keepalived

4) 设置服务开机启动

  1.  chkconfig keepalived on

5) 启动服务

service keepalived start，出现：

说明没有权限，赋权：chmod +x /etc/init.d/keepalived

重新启动：service keepalived start

出现上图，即启动成功，我们可以查看进程：ps -ef|grep keepalived

3.keepalived配置文件

  • global_defs 全局配置

  • vrrpinstance VI1

  • virtual_server lvs配置

1) global_defs 全局配置

    

  1.  global_defs {
    2. 

  2.    notification_email {     # 设置报警的邮件，如果keepalived出现问题，会发邮件到下面的邮箱
    3. 

  3.      acassen@firewall.loc   # 每一行代表一个邮箱，可配置多个
    4. 

  4.      failover@firewall.loc
    5. 

  5.      sysadmin@firewall.loc
    6. 

  6.    }
    7. 

  7.    notification_email_from Alexandre.Cassen@firewall.loc  # 由哪一个邮箱发送，即发件箱
    8. 

  8.    smtp_server 192.168.200.1 # 设置smtp server地址
    9. 

  9.    smtp_connect_timeout 30   # 设置连接smtp server的超时时间
    10. 

  10.    router_id LVS_DEVEL       # 表示运行keepalived服务器的一个标识。发邮件时显示在邮件主题的信息
    11. 

  11.    vrrp_skip_check_adv_addr
    12. 

  12.    vrrp_strict
    13. 

  13.    vrrp_garp_interval 
    14. 

  14.    vrrp_gna_interval 
    15. 

  15.  }
    16.

2) vrrpinstance VI1

    

  1.  vrrp_instance VI_1 {
    2. 

  2.     state MASTER   　　　　   # 指定keepalived的角色，MASTER表示此主机是主服务器，BACKUP表示此主机是备用服务器
    3. 

  3.     interface eth0 　　 　 　 # 高可用的检测端口 和 网卡名称
    4. 

  4.     virtual_router_id 51     # 虚拟路由的标识，这个标识是一个数字，同一个vrrp实例使用的标识。即同一vrrp_instance下，MASTER和BACKUP必须是一致的
    5. 

  5.     priority 100  　　　　    # 权重，节点优先级，数字越大，优先级越高，在同一个vrrp_instance下，MASTER的优先级必须大于BACKUP的优先级
    6. 

  6.     advert_int 1    　　　　  # 设定MASTER与BACKUP负载均衡器之间同步检查的时间间隔，单位是秒
    7. 

  7.     authentication { 　　     # 设置验证类型和密码
    8. 

  8.         auth_type PASS 　　   # 设置验证类型，主要有PASS和AH两种
    9. 

  9.         auth_pass 1111 　　   # 设置验证密码，在同一个vrrp_instance下，MASTER与BACKUP必须使用相同的密码才能正常通信
    10. 

  10.     }
    11. 

  11.     virtual_ipaddress {      # 设置虚拟IP地址，可以设置多个虚拟IP地址，每行一个
    12. 

  12.         192.168.200.16
    13. 

  13.         192.168.200.17
    14. 

  14.         192.168.200.18
    15. 

  15.     }
    16. 

  16.  }
    17.

3) virtual_server lvs配置

    

  1.    virtual_server 192.168.200.100 443 { 　# 设置虚拟服务器，需要指定虚拟IP地址和服务端口，IP与端口之间用空格隔开
    2. 

  2.      delay_loop 6　　#设置运行情况检查时间，单位是秒
    3. 

  3.      lb_algo rr　　  #设置负载调度算法，这里设置为rr，即轮询算法
    4. 

  4.      lb_kind NAT     #设置LVS实现负载均衡的机制，有NAT、TUN、DR三个模式可选
    5. 

  5. 　　　　persistence_timeout 50  #会话保持时间，单位是秒。这个选项对动态网页是非常有用的，为集群系统中的session共享提供了一个很好的解决方案。
    6. 

  6. 　　　　　　　　　　　　　　　　　　#有了这个会话保持功能，用户的请求会被一直分发到某个服务节点，直到超过这个会话的保持时间。
    7. 

  7. 　　　　　　　　　　　　　　　　　　#需要注意的是，这个会话保持时间是大无响应超时时间，也就是说，用户在操作动态页面时，如果50秒内没有执行任何操作，
    8. 

  8. 　　　　　　　　　　　　　　　　　　#那么接下来的操作会被分发到另外的节点，但是如果用户一直在操作动态页面，则不受50秒的时间限制
    9. 


    10. 

  10.  　　protocol TCP                         # 指定转发协议类型，有TCP和UDP两种
    11. 

  11.     real_server 192.168.201.100 443 {   # 配置服务节点1，需要指定real server的真实IP地址和端口，IP与端口之间用空格隔开
    12. 

  12.          weight 1　　　　                # 配置服务节点的权值，权值大小用数字表示，数字越大，权值越高，设置权值大小可以为不同性能的服务器
    13. 

  13. 　　　　　　　　　　                       # 分配不同的负载，可以为性能高的服务器设置较高的权值，而为性能较低的服务器设置相对较低的权值，
    14. 

  14.                                         #  这样才能合理地利用和分配系统资源
    15. 


    16. 

  16.          SSL_GET {          #健康检查方式,realserver的状态检测设置部分，单位是秒,主要有HTTP_GET、SSL_GET、TCP_CHECK
    17. 

  17.              url {
    18. 

  18.               path /        # 检查的url可以是多个
    19. 

  19.                digest ff20ad2481f97b1754ef3e12ecd3a9cc    # 检查后的摘要信息，用工具genhash生成
    20. 

  20.              } 
    21. 

  21.              url {
    22. 

  22.                path /mrtg/
    23. 

  23.                digest 9b3a0c85a887a256d6939da88aabd8cd
    24. 

  24.              } 
    25. 

  25.              connect_timeout 3　　    #表示3秒无响应超时
    26. 

  26.              nb_get_retry 3　　　　    #表示重试次数
    27. 

  27.              delay_before_retry 3     #表示重试间隔　　
    28. 

  28.          }   
    29. 

  29.      }   
    30. 

  30.   } 
    31.

二、Nginx+keepalived实现高可用

1.前提

两台Linux服务器，IP分别为192.168.80.128 和 192.168.80.129，都安装Nginx和keepalived，并启动。

2.配置双机热备

1.将192.168.80.128看作master（主机），将192.168.80.129看作backup（备机）

2.修改128（主）的keepalived配置文件

    

  1. ! Configuration File for keepalived
    2. 


    3. 

  3. global_defs {
    4. 

  4.    router_id LVS_DEVEL    # 运行keepalived服务器的一个标识
    5. 

  5. }
    6. 


    7. 

  7. vrrp_instance VI_1 {
    8. 

  8.     state MASTER
    9. 

  9.     interface eth0   # 通过ifconfig查看此IP对应的网卡
    10. 

  10.     virtual_router_id 51
    11. 

  11.     priority 101   # master权重设置为101，
    12. 

  12.                    # master的权重一定要比backup的权重要大，这样就可以保证在master down机后，
    13. 

  13.                    # bakup可以立即升级为master，当master回复后，可以重新成为master。
    14. 

  14.     advert_int 1
    15. 

  15.     authentication {
    16. 

  16.         auth_type PASS
    17. 

  17.         auth_pass 1111
    18. 

  18.     }
    19. 

  19.     virtual_ipaddress {
    20. 

  20.         192.168.80.100        # 虚拟主机的IP，搭建完成后通过此IP访问
    21. 

  21.     }
    22. 

  22. }
    23. 


    24. 

  24. virtual_server 192.168.80.100 80 {  # 虚拟IP和端口
    25. 

  25.    delay_loop 6
    26. 

  26.     lb_algo rr
    27. 

  27.     lb_kind NAT
    28. 

  28.     persistence_timeout 50
    29. 

  29.     protocol TCP
    30. 


    31. 

  31.     real_server 192.168.80.128 80 {       # 真实IP和端口
    32. 

  32.         weight 1  # 权重
    33. 

  33.         TCP_CHECK {
    34. 

  34.             connect_timeout 3
    35. 

  35.             nb_get_retry 3
    36. 

  36.             delay_before_retry 3
    37. 

  37.             connect_port 80      # 健康检查的端口
    38. 

  38.         }
    39. 

  39.     }
    40. 

  40. }
    41.

3.重启128（master）上的keepalived

  1. service keepalived restart

4.修改129（备）的keepalived配置文件

    

  1. ! Configuration File for keepalived
    2. 


    3. 

  3. global_defs {
    4. 

  4.    router_id LVS_DEVEL    # 运行keepalived服务器的一个标识
    5. 

  5. }
    6. 


    7. 

  7. vrrp_instance VI_1 {
    8. 

  8.     state BACKUP
    9. 

  9.     interface eth0   # 通过ifconfig查看此IP对应的网卡
    10. 

  10.     virtual_router_id 51
    11. 

  11.     priority 100   # backup权重设置为100
    12. 

  12.     advert_int 1
    13. 

  13.     authentication {
    14. 

  14.         auth_type PASS
    15. 

  15.         auth_pass 1111
    16. 

  16.     }
    17. 

  17.     virtual_ipaddress {
    18. 

  18.         192.168.100.100        # 虚拟主机的IP，搭建完成后通过此IP访问
    19. 

  19.     }
    20. 

  20. }
    21. 


    22. 

  22. virtual_server 192.168.100.100 80 {  # 虚拟IP和端口
    23. 

  23.    delay_loop 6
    24. 

  24.     lb_algo rr
    25. 

  25.     lb_kind NAT
    26. 

  26.     persistence_timeout 50
    27. 

  27.     protocol TCP
    28. 


    29. 

  29.     real_server 192.168.80.129 80 {       # 真实IP和端口
    30. 

  30.         weight 1  # 权重
    31. 

  31.         TCP_CHECK {
    32. 

  32.             connect_timeout 3
    33. 

  33.             nb_get_retry 3
    34. 

  34.             delay_before_retry 3
    35. 

  35.             connect_port 80      # 健康检查的端口
    36. 

  36.         }
    37. 

  37.     }
    38. 

  38. }
    39.

5.重启129（backup）上的keepalived

  1. service keepalived restart

6.在浏览器中访问：http://192.168.80.100/，出现Nginx的欢迎界面，表示成功！当master正常时，只会访问到master，当master 异常时，就会访问backup。

7.停止128（master）上的keepalived，用来模仿master异常

  1. service keekealived stop

8.在浏览器中访问：http://192.168.80.100/，发现出现Nginx的欢迎界面，即访问backup成功！

3.配置keepalived的日志

1.配置keepalived日志，默认是没有配置的

  1. vi /etc/sysconfig/keepalived

改为：KEEPALIVED_OPTIONS="-D -d -S 0"

2.配置到系统日志，修改etc/rsyslog.conf中的内容，vim /etc/rsyslog.conf，在文件中增加如下内容，和9对应：

  1. local0.* /var/log/keepalived.log

3.重启系统日志

  1. service rsyslog restart

4.重启keepalived

  1. service keepalived restart

大功告成！



相关文章