企业级高可用web架构之haproxy keepalived-凯发app官方网站

细数下来，算是东莞的项目的话，haproxy keepalived我差不多也有三套在线上跑了，另外，这套web方案也是我的一拍网的备份方案之一，目前也在测试，如果速度和稳定性够强劲的话，我也考虑将lvs keepalived换成haproxy keepalived，关于haproxy的语法和安装步骤请参考我的专题系列文章，另外，此篇文章跟刘天斯的不一样，我主要用其作为web级别的负载均衡（七层应用）。
一、线上跑的haproxy配置文件，代码如下：

1. global 
2.         log 127.0.0.1   local0 
3.         maxconn 65535 
4.         chroot /usr/local/haproxy 
5.         uid 99    
6.         gid 99 
7.         daemon 
8.         nbproc 8 
9.         pidfile /usr/local/haproxy/haproxy.pid 
10.         debug 
12. defaults  
13.          log     127.0.0.1       local3  
14.          mode   http  
15.          option httplog  
16.          option httpclose  
17.          option dontlognull  
18.          option forwardfor  
19.          option redispatch  
20.          retries 2  
21.          maxconn 2000  
22.          balance source  
23.          stats   uri     /web-status  
24.          contimeout      5000  
25.          clitimeout      50000  
26.          srvtimeout      50000  
28. listen  
29.         bind *:80 
30.         mode http 
31.         option httplog 
32.         log global 
33.         option httpchk head /index.jsp http/1.0 
34.         server web1  203.93.236.147:80 weight 5  check inter 2000 rise 2 fall 3 
35.         server web2  203.93.236.146:80 weight 3  check inter 2000 rise 2 fall 3 

二、haproxy的启动、关闭和重启脚本，代码如下：

1. #!/bin/sh 
2. # chkconfig 35 on 
3. # description: haproxy is a tcp/http reverse proxy which is particularly suited for high availability environments. 
5. # source function library. 
6. if [ -f /etc/init.d/functions ]; then 
7.   . /etc/init.d/functions 
8. elif [ -f /etc/rc.d/init.d/functions ] ; then 
9.   . /etc/rc.d/init.d/functions 
10. else 
11.   exit 0 
12. fi 
14. # source networking configuration. 
15. . /etc/sysconfig/network 
17. # check that networking is up. 
18. [ ${networking} = "no" ] && exit 0 
20. [ -f /usr/local/haproxy/conf/haproxy.cfg ] || exit 1 
22. retval=0 
24. start() { 
25.   /usr/local/haproxy/sbin/haproxy -c -q -f /usr/local/haproxy/conf/haproxy.cfg 
26.   if [ $? -ne 0 ]; then 
27.     echo "errors found in configuration file." 
28.     return 1 
29.   fi 
31.   echo -n "starting haproxy: " 
32.   daemon /usr/local/haproxy/sbin/haproxy -d -f /usr/local/haproxy/conf/haproxy.cfg -p /var/run/haproxy.pid 
33.   retval=$? 
34.   echo 
35.   [ $retval -eq 0 ] && touch /var/lock/subsys/haproxy 
36.   return $retval 
37. } 
39. stop() { 
40.   echo -n "shutting down haproxy: " 
41.   killproc haproxy -usr1 
42.   retval=$? 
43.   echo 
44.   [ $retval -eq 0 ] && rm -f /var/lock/subsys/haproxy 
45.   [ $retval -eq 0 ] && rm -f /var/run/haproxy.pid 
46.   return $retval 
47. } 
49. restart() { 
50.   /usr/local/haproxy/sbin/haproxy -c -q -f /usr/local/haproxy/conf/haproxy.cfg 
51.   if [ $? -ne 0 ]; then 
52.     echo "errors found in configuration file, check it with 'haproxy check'." 
53.     return 1 
54.   fi 
55.   stop 
56.   start 
57. } 
59. check() { 
60.   /usr/local/haproxy/sbin/haproxy -c -q -v -f /usr/local/haproxy/conf/haproxy.cfg 
61. } 
63. rhstatus() { 
64.   status haproxy 
65. } 
67. condrestart() { 
68.   [ -e /var/lock/subsys/haproxy ] && restart || : 
69. } 
71. # see how we were called. 
72. case "$1" in 
73.   start) 
74.     start 
75.     ;; 
76.   stop) 
77.     stop 
78.     ;; 
79.   restart) 
80.     restart 
81.     ;; 
82.   reload) 
83.     restart 
84.     ;; 
85.   condrestart) 
86.     condrestart 
87.     ;; 
88.   status) 
89.     rhstatus 
90.     ;; 
91.   check) 
92.     check 
93.     ;; 
94.   *) 
95.     echo $"usage: haproxy {start|stop|restart|reload|condrestart|status|check}" 
96.     retval=1 
97. esac 
99. exit $retval 

三、haproxy的监控脚本我没有做，这个实施起来也简单，我们可以用curl -s --head | awk '/http/ {print $2}'的方法，判断是否返回了正常的200代码。 

四、加上日志支持，代码如下：

1. #vim /etc/syslog.conf 
2. 添加： 
3. local3.*        /var/log/haproxy.log 
4. local0.*        /var/log/haproxy.log 
5. #vim /etc/sysconfig/syslog 
6. 修改： 
7. syslogd_options="-r -m 0" 
8. service syslog restart
   

五、大家需要注意的几个地方是：
1)haproyx采用的是balance source机制，它跟nginx的ip_hash机制原理类似，是让客户机访问时始终访问后端的某一台真实的web服务器，这样让session就固定下来了；
2)option httpchk head /index.jsp http/1.0 是网页监控，如果haproxy检测不到web的根目录下没有index.jsp，就会产生503报错。
3)有网友说haproxy必须采用listen 203.93.236.141:80这样类似的格式，这样其实不好，做集群时会导致从机启动不了，我们可以用bind *:80的方式代替。
4)haproxy的并发监控和日志收集分析是下一步考虑的事情。