keepalived(高可用)+nginx（负载平衡）+web

情况

注意：

(1) 做高可用+负载平衡至少需要四台服务器：两台独立的高可用+负载平衡器，两台web服务器做集群
(2) vip（假造ip）不能和物理ip辩论
(3) vip（假造ip）最好设置成和内网ip同一网段，末了做所在映射到公网ip
(4) keeplived（高可用）+nginx（负载平衡） 可以实现多域名对应一个VIP,并且访问不同域名，表现不同主页，可行，已测
(5) 负载平衡服务器（keeplived+nginx）最好和后端web服务器在同一局域网内
(6) 两台web服务的网站内容必须相同
(7) keeplived+nginx 中后端web服务器不需要配置vip，也不用抑制arp广播，由于后端web回包时还会经过前端nginx
(8) 心跳线：两台服务器各新增一块网卡然后配上恣意网段ip只要能相互ping通就行(不要和局域网通网段)
名词表明：
VIP：负载平衡服务器的假造ip所在
LB ：负载平衡服务器
sealserver：后端真实服务器
形貌配置keepalive+nginx+web的过程

1. 1、准备好后端web集群并且保证web集群内容一致
2. 2、配置2台nginx的反向代理功能，保证能通过nginx正常访问到后端的web集群
3. 3、在每台nginx上配置keepalive，模式为主备，实现当用户访问主keepalive的时候，vip能够正常把数据包发送给nginx并实现反向代理，后端的web集群回复用户的时候仍然通过vip来发送数据。
4. 注意：如果master上的nginx发生故障keepalive需要手动停止才能把vip漂移到backup上。

复制代码

1、安装keepalived（与nginx[负载平衡服务器] 在一台服务器上）

1. # keepalived使用 VRRP（虚拟路由冗余协议），实现单点故障切换，俗称心跳线监听
2. [root@oldboy ~]# yum -y install keepalived
3. [root@oldboy ~]# cd /etc/keepalived/
4. [root@oldboy keepalived]#  cp keepalived.conf keepalived.conf.ori
5. [root@oldboy keepalived]# sed  -n '1,31p' keepalived.conf.ori >keepalived.conf

复制代码

2、配置web服务器站点目次（Real-server：后端web服务器）

1. (1) 配置real-server-10.0.0.7（nginx-web）
2. [root@Oldboy extra]# cat www.conf
3. server {
4.         listen        80;
5.         server_name  www.etiantian.org;
6.         location / {
7.             root   html/www;
8.             index  index.html index.htm;
9.         }
10. }
13. [root@Oldboy extra]# cat bbs.conf
14. server {
15.         listen        80;
16.         server_name  bbs.etiantian.org;
17.         location / {
18.             root   html/bbs;
19.             index  index.php  index.html index.htm;
20.         }
21. }
25. [root@Oldboy extra]# cat blog.conf
26. server {
27.         listen        80;
28.         server_name  blog.etiantian.org;
29.         location / {
30.         root     html/blog;
31.         index    index.html index.php;
32. }
34.         location ~ .*\.(php|php5)?$ {
35.         root html/blog;
36.         fastcgi_pass  127.0.0.1:9000;
37.         fastcgi_index index.php;
38.         include fastcgi.conf;
39.         }
40. }
42. (2) 配置real-server-10.0.0.8 (apache-web)
43. [root@Oldboy extra]# egrep -v "#|^$" httpd-vhosts.conf
44. NameVirtualHost *:80
45. <VirtualHost *:80>
46.     ServerAdmin oldboy@oldboyedu.com
47.     DocumentRoot "/application/apache2.2.31/htdocs/www"
48.     ServerName   www.etiantian.org
49.     ServerAlias etiantian.org
50.     ErrorLog "/app/logs/www-error_log"
51.     CustomLog "/app/logs/www-access_log" common
52. </VirtualHost>
53. <VirtualHost *:80>
54.     ServerAdmin oldboy@oldboyedu.com
55.     DocumentRoot "/application/apache2.2.31/htdocs/bbs"
56.     ServerName   bbs.etiantian.org
57.     ErrorLog "/app/logs/bbs-error_log"
58.     CustomLog "/app/logs/bbs-access_log" common
59. </VirtualHost>
60. <VirtualHost *:80>
61.     ServerAdmin oldboy@oldboyedu.com
62.     DocumentRoot "/application/apache2.2.31/htdocs/blog"
63.     ServerName   blog.etiantian.org
64.     ErrorLog "/app/logs/blog-error_log"
65.     CustomLog "/app/logs/blog-access_log" common
66. </VirtualHost>

复制代码

3、配置nginx负载平衡服务器 ，配置两台，主备都一样（也叫反向代理）

1. [root@Oldboy keepalived]# vi /application/nginx/conf/nginx.conf
2. worker_processes  1;
3. events {
4.     worker_connections  1024;
5. worker_processes  1;
6. events {
7.     worker_connections  1024;
8. }
9. http {
10.     include       mime.types;
11.     default_type  application/octet-stream;
12.     sendfile        on;
13.     keepalive_timeout  65;
15. upstream www_pool {
16.     server 172.16.1.7:80  weight=1;
17.     server 172.16.1.8:80  weight=1;
18. }
20. server {
21.         listen       80;
22.         server_name  www.etiantian.org bbs.etiantian.org  blog.etiantian.org;   （多个域名用空格隔开）
23.         location / {
24.             index  index.html index.htm;
25.             proxy_pass http://www_pool;
26.             proxy_set_header Host  $host;
27.             proxy_set_header X-Forwarded-For $remote_addr;
28.         }
29.     }
30. }

复制代码

4、配置keepalived（keepalived和负载平衡服务器在一台服务器上）

1. (1) 配置keepalived-MASTER（10.0.0.5）
2. [root@Oldboy keepalived]# cat keepalived.conf
3. ! Configuration File for keepalived
5. global_defs {
6.    router_id LVS_DEVEL_01         \\keepalived服务器标识符，最好和备keepalived不一样
7. }
9. vrrp_instance VI_1 {                    \\VRRP实例1，多实例不能相同，但是主备必须相同
10.     state MASTER                          \\指定keepalived的角色，MASTER为主服务器，BACKUP为备用服务器
11.     interface eth0                          \\监听的接口
12.     virtual_router_id 51                  \\虚拟路由标识，这个标识是一个数字(1-255)，在一个VRRP实例中主备服务器ID必须一样
13.     priority 150                               \\优先级，数字越大优先级越高，在一个实例中主服务器优先级要高于备服务器
14.     advert_int 1                                \\设置主备之间同步检查的时间间隔，单位秒
15.     authentication {
16.         auth_type PASS
17.         auth_pass 1111
18.     }
19.     virtual_ipaddress {
20.         172.16.1.254/24 dev eth0 label eth0:3    \\定义虚拟ip地址，在监听的eth0网卡上增加eth0:3虚拟网卡
21.         #172.16.1.245                                           \\直接加ip也可以，用ip add 看
22.     }
23. }
24. (2) 配置keepalived-BACKUP（10.0.0.6）
25. [root@Oldboy keepalived]# cat keepalived.conf
26. ! Configuration File for keepalived
28. global_defs {
29.    }
30.    router_id LVS_DEVEL_02                                                                     \\keepalived服务器标识符，最好和主keepalived不一样
31. }
33. vrrp_instance VI_1 {                                                                                \\VRRP实例，和主一样
34.     state BACKUP                                                                                     \\指定keepalived的角色，这里是备用服务器
35.     interface eth0
36.     virtual_router_id 51                                                                           
37.     priority 100                                                                                          \\优先级低于主服务器，最好相差50
38.     advert_int 1
39.     authentication {
40.         auth_type PASS
41.         auth_pass 1111
42.     }
43.     virtual_ipaddress {
44.     172.16.1.254/24 dev eth0 label eth0:3
45.     #172.16.1.245                                        \\直接加ip也可以，用ip add 看
46.     }
47. }

复制代码

5、启动keepalived

1. /etc/init.d/keepalived start
2. chkconfig keepalived on
3. echo "/application/nginx/sbin/nginx" >> /etc/rc.d/rc.local
4. 查看vip漂移：
5. [root@Oldboy keepalived]# ifconfig eth0:3
6. eth0:3    Link encap:Ethernet  HWaddr 00:0C:29:6D:23:83  
7.           inet addr:172.16.1.254  Bcast:0.0.0.0  Mask:255.255.255.0
8.           UP BROADCAST RUNNING MULTICAST  MTU:1500  Metric:1

复制代码

6、将vip映射到公网ip（由于我这里没有硬件防火墙，只能使用同一局域网的别的服务器取代，这台服务器需要能联网）

1. (1) 开启路由转发
2. [root@Oldboy ~]# sed -i 's#net.ipv4.ip_forward = 0#net.ipv4.ip_forward = 1#g' /etc/sysctl.conf
3. [root@Oldboy ~]# sysctl -p
4. net.ipv4.ip_forward = 1
6. (2) 配置地址映射(当访问公网ip:10.0.0.51的时候跳转到vip:172.16.1.254)
7. iptables -F -t nat
8. iptables -t nat -I PREROUTING -p tcp  -d 10.0.0.51 --dport 80 -j DNAT --to-destination 172.16.1.254:80
9. iptables -t nat -A POSTROUTING  -j MASQUERADE
10. /etc/init.d/iptables save
11. /etc/init.d/iptables restart

复制代码

7、测试并验证

• keepalived+nginx：多个域名假造主机对应一个VIP，并且访问不同域名假造主机，表现不同主页，可行，已测，由于nginx支持7层转发
  

1. 客户端绑定hosts: 10.0.0.51  www.etiantian.org  bbs.etiantian.org  blog.etiantian.org   （一个vip对应多个域名）
3. 1、keepalived只负责vip漂移，能够让用户顺利将请求通过vip交给负载均衡服务器，当停止主服务器，备用服务器会接管vip以及对应的服务，当启动主服务器，备用服务器会让出接管权，注意这里是停止主服务器，如果只停止nginx服务vip是不会发生漂移的。
5. 2、当访问www.etiantian.org  bbs.etiantian.org 或 blog.etiantian.org，则解析到 10.0.0.51（公网ip）并NAT映射到vip:172.16.1.254（vip与负载均衡服务器在一起），负载均衡服务器会带着用户的主机头请求后端的real-server，后端real-server会根据主机头信息，回复负载均衡服务器，然后负载均衡服务器再回复客户端请求。

复制代码

免责声明：如果侵犯了您的权益，请联系站长，我们会及时删除侵权内容，谢谢合作！更多信息从访问主页：qidao123.com:ToB企服之家，中国第一个企服评测及商务社交产业平台。