Nginx+keepalived主从与双主架构总结

2021-09-15 17:40:35 浏览数 (1)

1.keepalived高可用软件简介

keepalived是目前轻量级的管理方便、易用的高可用软件解决方案。

keepalived是一个类似于工作在三层、四层、七层交换机的软件。

keepalived软件有两种功能,一是监控检查,一是VRRP冗余协议。

keepalived的作用是检测WEB服务器的状态。

工作在三层时:

keepalived会定期向服务器群中的服务器发送一个ICMP的数据包,如果发现某台服务器的IP地址无法ping通,keepalived便报告这台服务器失效,并将它从服务器集群中剔除。

它是以服务器IP地址是否有效作为服务器工作正常与否的标准。

工作在四层时:

主要以TCP端口的状态来决定服务器是否工作正常。

如WEB SERVER的服务端口一般是80,如果keepalived检测到80端口没有启动,则keepalived将把这台服务器从服务器中剔除。

工作在七层时:

keepalived将根据用户的设定检查服务器程序的运行是否正常,如果与用户的设定不相符,则将其剔除。

2.VRRP及相关术语

VRRP(Virtual Router Redundancy Protocol,虚拟路由器冗余协议)是一种容错协议,保证当主机的下一条路由器出现故障时,由另一台路由器来代替出现故障的路由器进行工作,从而保持网络通信的连续性和可靠性。

VRRP相关术语:

1)虚拟路由器:由一个Master路由器和一个或多个Backup路由器组成。所有的Master和Backup组成一个组,这个主就是虚拟路由器。

2)VRID:虚拟路由器的标识。同一虚拟路由器内的路由器有着相同的VRID。

3)Master:虚拟路由器中正在工作的路由器

4)Backup:备用路由器。

5)虚拟IP地址:路由器组(虚拟路由器)的IP地址。

6)优先级:用来确定Master和Backup。

7)抢占模式与非抢占模式:Master会以组播方式不断的向虚拟路由器组内发送自己的心跳报文,一旦Backup在设定时间内没有收到心跳信息的次数超过了设定次数,则会将Master的所有权转移到优先级最高的Backup,则就是抢占模式。非抢占模式是指只有在主节点完全故障时才能将backup变为master。

keepalived就是利用VRRP协议实现的一种可保障集群高可用的工具。通过主机之间的优先等级以及心跳检测来及时切换准备主机的工作状态,以提高集群的高可用性。

keepalived的核心组件:

1)VRRP stack

2)ipvs wrapper

3)checkers

为什么使用keepalived一定要确认网卡支持并开启组播功能?

如VRRP中所述,Master需要通过组播功能定时向Backup发送心跳信息,报告自己的运作是否正常,组播通信方式是一种很节省资源的通信方式。

3.Keepalived安装

在两台服务器上安装keepalived

  1. [root@keepalived01 ~]# yum install -y keepalived
  2. 已加载插件:fastestmirror, langpacks  
  3. Repodata is over 2 weeks old. Install yum-cron? Or run: yum makecache fast  
4.nginx keepalived主从模式集群实验

这种方案,使用一个vip地址,前端使用2台机器,一台做主,一台做备,但同时只有一台机器工作,另一台备份机器在主机器不出现故障的时候,永远处于浪费状态,对于服务器不多的网站,该方案不经济实惠。

1)环境准备

两台LINUX服务器,Centos7.3:

10.128.25.23/24

10.128.25.25/24

虚拟IP为10.128.25.24/24

2)Nginx负载均衡服务器安装与配置

编辑repo文件:

到nginx官网查找相关资料,编辑nginx.repo

http://nginx.org/en/download.html

下面是官网的安装帮助说明

  1. Install the prerequisites:  
  2. sudo yum install yum-utils  
  3. To set up the yum repository, create the file named /etc/yum.repos.d/nginx.repo with the following contents:  
  4. [nginx-stable]  
  5. name=nginx stable repo  
  6. baseurl=http://nginx.org/packages/centos/$releasever/$basearch/  
  7. gpgcheck=1  
  8. enabled=1  
  9. gpgkey=https://nginx.org/keys/nginx_signing.key  
  10. module_hotfixes=true  
  11. [nginx-mainline]  
  12. name=nginx mainline repo  
  13. baseurl=http://nginx.org/packages/mainline/centos/$releasever/$basearch/  
  14. gpgcheck=1  
  15. enabled=0  
  16. gpgkey=https://nginx.org/keys/nginx_signing.key  
  17. module_hotfixes=true  
  18. By default, the repository for stable nginx packages is used. If you would like to use mainline nginx packages, run the following command:  
  19. sudo yum-config-manager --enable nginx-mainline  
  20. To install nginx, run the following command:  
  21. sudo yum install nginx  
  22. When prompted to accept the GPG key, verify that the fingerprint matches 573B FD6B 3D8F BC64 1079 A6AB ABF5 BD82 7BD9 BF62, and if so, accept it.  

两台nginx服务器的配置相同

  1. upstream myserver{  
  2.        server 10.128.25.200:8080;  
  3.        server 10.128.25.201:8090;  
  4.        server 10.128.25.202:8080;  
  5.      }  
  6.    server {  
  7.        listen       80 ;   
  8.        server_name  localhost;  
  9. # Load configuration files for the default server block.
  10. # include /etc/nginx/default.d/*.conf;
  11.        location / {  
  12.            proxy_pass http://myserver;  
  13.            proxy_connect_timeout 10;       }  
  14.        error_page 404 /404.html;  
  15.            location = /40x.html {  
  16.        }  
  17.        error_page 500 502 503 504 /50x.html;  
  18.            location = /50x.html {  
  19.        }  
3)两台keepalived服务器配置

配置主keepalived

第一台keepalived服务器配配置如下:

  1. vrrp_instance VI_1 {  
  2.     state MASTER  
  3.     interface eth0  
  4.     virtual_router_id 51  
  5.     priority 100  
  6.     advert_int 1  
  7.     authentication {  
  8.         auth_type PASS  
  9.         auth_pass 1111  
  10.     }  
  11.     virtual_ipaddress {  
  12.         10.128.25.24  
  13.     }  
  14. }  

第二台keepalivd服务器配置如下:

/etc/keepalived

  1. vrrp_instance VI_1 {  
  2.     state BACKUP  
  3.     interface eth0  
  4.     virtual_router_id 51  
  5.     priority 90  
  6.     advert_int 1  
  7.     authentication {  
  8.         auth_type PASS  
  9.         auth_pass 1111  
  10.     }  
  11.     virtual_ipaddress {  
  12.         10.128.25.24  
  13.     }  
  14. }  
5.nginx keepalived双主模式集群实验

这种方案,使用两个vip地址,前端使用2台机器,互为主备,同时有两台机器工作,当其中一台机器出现故障,两台机器的请求转移到一台机器负担,非常适合于当前架构环境。

这种模式只需要更改下keepalived配置文件即可。

23上的配置

  1. vrrp_instance VI_1 {  
  2.     state MASTER  
  3.     interface eth0  
  4.     virtual_router_id 51  
  5.     priority 100  
  6.     advert_int 1  
  7.     authentication {  
  8.         auth_type PASS  
  9.         auth_pass 1111  
  10.     }  
  11.     virtual_ipaddress {  
  12.         10.128.25.24  
  13.     }  
  14. }  
  15. #VIP2
  16. vrrp_instance VI_2 {  
  17.     state BACKUP  
  18.     interface eth0  
  19.     virtual_router_id 52  
  20.     priority 90  
  21.     advert_int 1  
  22.     authentication {  
  23.         auth_type PASS  
  24.         auth_pass 2222  
  25.     }  
  26.     virtual_ipaddress {  
  27.         10.128.25.26  
  28.     }  
  29. }  

25上的配置:

  1. vrrp_instance VI_1 {  
  2.     state BACKUP  
  3.     interface eth0  
  4.     virtual_router_id 51  
  5.     priority 90  
  6.     advert_int 1  
  7.     authentication {  
  8.         auth_type PASS  
  9.         auth_pass 1111  
  10.     }  
  11.     virtual_ipaddress {  
  12.         10.128.25.24  
  13.     }  
  14. }  
  15. #VIP2
  16. vrrp_instance VI_2 {  
  17.     state MASTER  
  18.     interface eth0  
  19.     virtual_router_id 52  
  20.     priority 100  
  21.     advert_int 1  
  22.     authentication {  
  23.         auth_type PASS  
  24.         auth_pass 2222  
  25.     }  
  26.     virtual_ipaddress {  
  27.         10.128.25.26  
  28.     }  
  29. }  

查看网卡配置信息

  1. [root@keepalived01 /]# ip a
  2. 1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN qlen 1  
  3.     link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00  
  4.     inet 127.0.0.1/8 scope host lo  
  5.        valid_lft forever preferred_lft forever  
  6.     inet6 ::1/128 scope host   
  7.        valid_lft forever preferred_lft forever  
  8. 2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000  
  9.     link/ether 00:0c:29:ce:97:9b brd ff:ff:ff:ff:ff:ff  
  10.     inet 10.128.25.23/24 brd 10.128.25.255 scope global eth0  
  11.        valid_lft forever preferred_lft forever  
  12.     inet 10.128.25.24/32 scope global eth0  
  13.        valid_lft forever preferred_lft forever  
  14.     inet6 fe80::20c:29ff:fece:979b/64 scope link   
  15.        valid_lft forever preferred_lft forever  
  16. 3: virbr0: <NO-CARRIER,BROADCAST,MULTICAST,UP> mtu 1500 qdisc noqueue state DOWN qlen 1000  
  17.     link/ether 52:54:00:a4:73:ea brd ff:ff:ff:ff:ff:ff  
  18.     inet 192.168.122.1/24 brd 192.168.122.255 scope global virbr0  
  19.        valid_lft forever preferred_lft forever  
  20. 4: virbr0-nic: <BROADCAST,MULTICAST> mtu 1500 qdisc pfifo_fast master virbr0 state DOWN qlen 1000  
  21.     link/ether 52:54:00:a4:73:ea brd ff:ff:ff:ff:ff:ff  
  22. [root@keepalived01 /]#
  23. [root@keepalived02 nginx]# ip a
  24. 1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN qlen 1  
  25.     link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00  
  26.     inet 127.0.0.1/8 scope host lo  
  27.        valid_lft forever preferred_lft forever  
  28.     inet6 ::1/128 scope host   
  29.        valid_lft forever preferred_lft forever  
  30. 2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc mq state UP qlen 1000  
  31.     link/ether 00:0c:29:91:3e:cf brd ff:ff:ff:ff:ff:ff  
  32.     inet 10.128.25.25/24 brd 10.128.25.255 scope global eth0  
  33.        valid_lft forever preferred_lft forever  
  34.     inet 10.128.25.26/32 scope global eth0  
  35.        valid_lft forever preferred_lft forever  
  36.     inet6 fe80::a5d1:e493:55c5:c293/64 scope link   
  37.        valid_lft forever preferred_lft forever  
  38. 3: virbr0: <NO-CARRIER,BROADCAST,MULTICAST,UP> mtu 1500 qdisc noqueue state DOWN qlen 1000  
  39.     link/ether 52:54:00:d8:0c:43 brd ff:ff:ff:ff:ff:ff  
  40.     inet 192.168.122.1/24 brd 192.168.122.255 scope global virbr0  
  41.        valid_lft forever preferred_lft forever  
  42. 4: virbr0-nic: <BROADCAST,MULTICAST> mtu 1500 qdisc pfifo_fast master virbr0 state DOWN qlen 1000  
  43.     link/ether 52:54:00:d8:0c:43 brd ff:ff:ff:ff:ff:ff  
  44. [root@keepalived02 nginx]#

0 人点赞