负载均衡

下载（选择最新的版本）： https://www.haproxy.org/ 
上传服务器后解压：      tar -zxvf haproxy-2.6.15.tar.gz

## 设置编译并安装
make TARGET=linux-glibc  PREFIX=/data/soft/haproxy
make install PREFIX=/data/soft/haproxy

## 创建配置文件目录与日志目录
mkdir  /data/soft/haproxy/conf
mkdir  /data/soft/haproxy/logs

## haproxy默认不创建配置文件目录和日志目录，这里是创建haproxy配置文件目录和日志文件目录
## haproxy安装完成后，默认安装目录中没有配置文件，这里是将源码包里面的示例配置文件拷贝到配置文件目录。
cp examples/option-http_proxy.cfg /data/soft/haproxy/conf/haproxy.cfg

rsyslog是linux系默认的日志输出系统，配置文件为/etc/rsyslog.conf，此主配置文件默认会读取/etc/rsyslog.d/*.conf目录下所有已.conf结尾的文件。
[root@localhost logs]# cat /etc/rsyslog.conf|grep IncludeConfig
$IncludeConfig /etc/rsyslog.d/*.conf
因此，这里我们为haproxy单独创建一个独立的配置文件，将文件命名为haproxy.conf，并放到/etc/rsyslog.d目录下，然后添加如下内容：
$ModLoad imudp
$UDPServerRun 514
local0.* /var/log/haproxy.log
&~ #如果不加这个配置，则除了在/var/log/haproxy.log中写入日志外，也会将haproxy日志写入message文件中。

操作如下：
cat /etc/rsyslog.conf|grep IncludeConfig
$IncludeConfig /etc/rsyslog.d/*.conf
vim /etc/rsyslog.d/haproxy.conf
$ModLoad imudp
$UDPServerRun 514
local0.*     /var/log/haproxy.log
&~

打开 /etc/sysconfig/rsyslog文件，将SYSLOGD_OPTIONS修改为如下内容：
SYSLOGD_OPTIONS="-c 2 -r -m 0"
其中：
-c 2 使用兼容模式，默认是 -c 5。
-r 开启远程日志。
-m 0 标记时间戳。单位是分钟，为0时，表示禁用该功能。

配置完成后，需要重启rsyslog服务，以保证配置生效。
systemctl restart rsyslog

global
    log 127.0.0.1 local0 info
    maxconn 4096
    user nobody
    group nobody
    daemon
    pidfile /data/soft/haproxy/logs/haproxy.pid
defaults
    mode http
    retries 3
    timeout connect 10s
    timeout client 20s
    timeout server 30s
    timeout check 5s
#-------------
#Stats monitor
#-------------
listen stats_monitor
    bind 0.0.0.0:9188
    mode http
    log 127.0.0.1 local0 err
    stats refresh 30s
    stats uri /haproxy-status
    stats realm welcome login\ Haproxy
    stats auth admin:admin~!@
    stats hide-version
    stats admin if TRUE
#--------------------
#Application
#--------------------  
    bind    *:8080
    mode    http
    balance roundrobin
    server  web1 192.168.3.51:9001 cookie server1 weight 6 check inter 2000 rise 2 fall 3
    server  web2 192.168.3.52:9001 cookie server2 weight 6 check inter 2000 rise 2 fall 3
    server  web3 192.168.3.53:9001 cookie server3 weight 6 check inter 2000 rise 2 fall 3   

# 1.global部分
global
    log 127.0.0.1 local0 info
    maxconn 4096
    user nobody
    group nobody
    daemon
    nbproc 1   # 5以上不支持这个配置，删除即可
    pidfile /data/soft/haproxy/logs/haproxy.pid
下面介绍每个选项的含义。
    log：全局的日志配置，local0是日志设备，info表示日志级别。其中日志级别有err、warning、info、debug四种可选。这个配置表示使用127.0.0.1上的rsyslog服务中的local0日志设备，记录日志等级为info。
    maxconn：设定每个haproxy进程可接受的最大并发连接数，此选项等同于Linux命令行选项"ulimit  -n"。
    user/ group：设置运行haproxy进程的用户和组，也可使用用户和组的uid和gid值来替代。
    daemon：设置HAProxy进程进入后台运行。这是推荐的运行模式。
    nbproc：设置HAProxy启动时可创建的进程数，此参数要求将HAProxy运行模式设置为"daemon"，默认只启动一个进程。根据使用经验，该值的设置应该小于服务器的CPU核数。创建多个进程，能够减少每个进程的任务队列，但是过多的进程可能会导致进程的崩溃。
    pidfile：指定HAProxy进程的pid文件。启动进程的用户必须有访问此文件的权限。

 defaults部分
defaults
    mode http
    retries 3
    timeout connect 10s
    timeout client 20s
    timeout server 30s
    timeout check 5s

    mode：设置HAProxy实例默认的运行模式，有tcp、http、health三个可选值。
    tcp模式：在此模式下，客户端和服务器端之间将建立一个全双工的连接，不会对七层报文做任何类型的检查，默认为tcp模式，经常用于SSL、SSH、SMTP等应用。
    http模式：在此模式下，客户端请求在转发至后端服务器之前将会被深度分析，所有不与RFC格式兼容的请求都会被拒绝。
    health模式：目前此模式基本已经废弃，不在多说。
    retries：设置连接后端服务器的失败重试次数，连接失败的次数如果超过这里设置的值，HAProxy会将对应的后端服务器标记为不可用。此参数也可在后面部分进行设置。
    timeout connect：设置成功连接到一台服务器的最长等待时间，默认单位是毫秒，但也可以使用其他的时间单位后缀。
    timeout client：设置连接客户端发送数据时最长等待时间，默认单位是毫秒，也可以使用其他的时间单位后缀。
    timeout server：设置服务器端回应客户度数据发送的最长等待时间，默认单位是毫秒，也可以使用其他的时间单位后缀。
    timeout check：设置对后端服务器的检测超时时间，默认单位是毫秒，也可以使用其他的时间单位后缀。    
  
# 3.frontend部分
frontend www
    bind *:80
    mode   http
    option  httplog
    option  forwardfor
    option  httpclose
    log     global
    default_backend htmpool
    
这部分通过frontend关键字定义了一个名为"www"的前端虚拟节点，下面介绍每个选项的含义。
  bind：此选项只能在frontend和listen部分进行定义，用于定义一个或几个监听的套接字。bind的使用格式为：
  bind [<address>:<port_range>]  interface  <interface>
  其中，address为可选选项，其可以为主机名或IP地址，如果将其设置为"*"或"0.0.0.0"，将监听当前系统的所有IPv4地址。port_range可以是一个特定的TCP端口，也可是一个端口范围，小于1024的端口需要有特定权限的用户才能使用。interface为可选选项，用来指定网络接口的名称，只能在Linux系统上使用。
  option  httplog：在默认情况下，haproxy日志是不记录HTTP请求的，这样很不方便HAProxy问题的排查与监控。通过此选项可以启用日志记录HTTP请求。
  option  forwardfor：如果后端服务器需要获得客户端的真实IP，就需要配置此参数。由于HAProxy工作于反向代理模式，因此发往后端真实服务器的请求中的客户端IP均为HAProxy主机的IP，而非真正访问客户端的地址，这就导致真实服务器端无法记录客户端真正请求来源的IP，而"X-Forwarded-For"则可用于解决此问题。通过使用"forwardfor"选项，HAProxy就可以向每个发往后端真实服务器的请求添加"X-Forwarded-For"记录，这样后端真实服务器日志可以通过"X-Forwarded-For"信息来记录客户端来源IP。
  option httpclose：此选项表示在客户端和服务器端完成一次连接请求后，HAProxy将主动关闭此TCP连接。这是对性能非常有帮助的一个参数。
  log  global：表示使用全局的日志配置，这里的"global"表示引用在HAProxy配置文件global部分中定义的log选项配置格式。
  default_backend：#指定默认的后端服务器池，也就是指定一组后端真实服务器，而这些真实服务器组将在backend段进行定义。这里的htmpool就是一个后端服务器组。
		
# 4.backend部分
backend htmpool
    mode    http
    option   redispatch
    option   abortonclose
    balance  roundrobin
    cookie   SERVERID
    option   httpchk GET /index.php
    server  web1 192.168.3.52:8080 cookie server1 weight 6 check inter 2000 rise 2 fall 3
    server  web2 192.168.3.53:8080 cookie server2 weight 6 check inter 2000 rise 2 fall 3
    
这个部分通过backend关键字定义了一个名为"htmpool"的后端真实服务器组。
    option  redispatch：此参数用于cookie保持的环境中。在默认情况下，HAProxy会将其请求的后端服务器的serverID插入到cookie中，以保证会话的SESSION持久性。而如果后端的服务器出现故障，客户端的cookie是不会刷新的，这就出现了问题。此时，如果设置此参数，就会将客户的请求强制定向到另外一个健康的后端服务器上，以保证服务的正常。
    option  abortonclose：如果设置了此参数，可以在服务器负载很高的情况下，自动结束掉当前队列中处理时间比较长的链接。
    balance：此关键字用来定义负载均衡算法。目前HAProxy支持多种负载均衡算法，常用的有如下几种：
    roundrobin：是基于权重进行轮叫调度的算法，在服务器的性能分布比较均匀的时候，这是一种最公平、最合理的算法。此算法经常使用。
    static-rr：也是基于权重进行轮叫的调度算法，不过此算法为静态方法，在运行时调整其服务器权重不会生效。
    source：是基于请求源IP的算法。此算法先对请求的源IP进行hash运算，然后将结果与后端服务器的权重总数相除后转发至某个匹配的后端服务器。这种方式可以使同一个客户端IP的请求始终被转发到某特定的后端服务器。
    leastconn：此算法会将新的连接请求转发到具有最少连接数目的后端服务器。在会话时间较长的场景中推荐使用此算法，例如数据库负载均衡等。此算法不适合会话较短的环境中，例如基于HTTP的应用。
    uri：此算法会对部分或整个URI进行hash运算，再经过与服务器的总权重相除，最后转发到某台匹配的后端服务器上。
    uri_param:此算法会根据URL路径中的参数进行转发，这样可保证在后端真实服务器数量不变时，同一个用户的请求始终分发到同一台机器上。
    hdr(<name>): 此算法根据http头进行转发，如果指定的http头名称不存在，则使用roundrobin算法进行策略转发。
    cookie：表示允许向cookie插入SERVERID，每台服务器的SERVERID可在下面的server关键字中使用cookie关键字定义。    
    
    option httpchk：此选项表示启用HTTP的服务状态检测功能。HAProxy作为一款专业的负载均衡器，它支持对backend部分指定的后端服务节点的健康检查，以保证在后端backend中某个节点不能服务时，把从frotend端进来的客户端请求分配至backend中其他健康节点上，从而保证整体服务的可用性。"option httpchk"的用法如下：
    option httpchk <method> <uri> <version>
    其中，各个参数的含义如下：
        method：表示HTTP请求的方式，常用的有OPTIONS、GET、HEAD几种方式。一般的健康检查可以采用HEAD方式进行，而不是才采用GET方式，这是因为HEAD方式没有数据返回，仅检查Response的HEAD是不是200状态。因此相对与GET来说，HEAD方式更快，更简单。
        uri：表示要检测的URL地址，通过执行此URL，可以获取后端服务器的运行状态。在正常情况下将返回状态码200，返回其他状态码均为异常状态。
        version：指定心跳检测时的HTTP的版本号。
    
    server：这个关键字用来定义多个后端真实服务器，不能用于defaults和frontend部分。使用格式为：
    server <name> <address>[:port] [param*]
    其中，每个参数含义如下：
        <name>：为后端真实服务器指定一个内部名称，随便定义一个即可。
        <address>：后端真实服务器的IP地址或主机名。
        <port>：指定连接请求发往真实服务器时的目标端口。在未设定时，将使用客户端请求时的同一端口。
        [param*]：为后端服务器设定的一系参数，可用参数非常多，这里仅介绍常用的一些参数：
        check：表示启用对此后端服务器执行健康状态检查。
        inter：设置健康状态检查的时间间隔，单位为毫秒。
        rise：设置从故障状态转换至正常状态需要成功检查的次数，例如。"rise 2"表示2次检查正确就认为此服务器可用。
        fall：设置后端服务器从正常状态转换为不可用状态需要检查的次数，例如，"fall 3"表示3次检查失败就认为此服务器不可用。
        cookie：为指定的后端服务器设定cookie值，此处指定的值将在请求入站时被检查，第一次为此值挑选的后端服务器将在后续的请求中一直被选中，其目的在于实现持久连接的功能。上面的"cookie server1"表示web1的serverid为server1。同理，"cookie server2"表示web2的serverid为server2。
        weight：设置后端真实服务器的权重，默认为1，最大值为256。设置为0表示不参与负载均衡。
        backup：设置后端真实服务器的备份服务器，仅仅在后端所有真实服务器均不可用的情况下才启用。  
        
# 5.listen部分
listen admin_stats
    bind 0.0.0.0:9188
    mode http
    log 127.0.0.1 local0 err
    stats refresh 30s
    stats uri /haproxy-status
    stats realm welcome login\ Haproxy
    stats auth admin:admin~!@
    stats hide-version
    stats admin if TRUE
这个部分通过listen关键字定义了一个名为"admin_stats"的实例，其实就是定义了一个HAProxy的监控页面，每个选项的含义如下：   
    stats refresh：设置HAProxy监控统计页面自动刷新的时间。
    stats uri：设置HAProxy监控统计页面的URL路径，可随意指定。例如，指定"stats uri /haproxy-status"，就可以通过http://IP:9188/haproxy-status 查看。
    stats realm：设置登录HAProxy统计页面时密码框上的文本提示信息。
    stats auth：设置登录HAProxy统计页面的用户名和密码。用户名和密码通过冒号分割。可为监控页面设置多个用户名和密码，每行一个。
    stats hide-version：用来隐藏统计页面上HAProxy的版本信息。
    stats admin if TRUE：通过设置此选项，可以在监控页面上手工启用或禁用后端真实服务器，仅在haproxy1.4.9以后版本有效。   

sbin下有一个haproxy文件，执行该文件可以操作启动、关闭、重启等。 haproxy [-f < 配置文件>] [ -vdVD ] [-n 最大并发连接总数] [-N 默认的连接数]
参数 含义
-v 显示当前版本信息；"-vv"显示已知的创建选项。
-d 表示让进程运行在debug模式；"-db"表示禁用后台模式，让程序跑在前台。
-D 让程序以daemon模式启动，此选项也可以在HAProxy配置文件中设置。
-q 表示安静模式，程序运行不输出任何信息。
-c 对HAProxy配置文件进行语法检查。此参数非常有用。如果配置文件错误，会输出对应的错误位置和错误信息。
-n 设置最大并发连接总数。
-m 限制可用的内存大小，以MB为单位。
-N 设置默认的连接数，
-p 设置HAProxy的PID文件路径。
-de 不使用epoll模型。
-ds 不使用speculative epoll
-dp 不使用poll模型。
-sf 程序启动后向PID文件里的进程发送FINISH信号，这个参数需要放在命令行的最后。
-st 程序启动后向PID文件里的进程发送TERMINATE信号，这个参数放在命令行的最后，经常用于重启HAProxy进程。

启动：  ./sbin/haproxy -f /data/soft/haproxy/conf/haproxy.cfg
关闭：	killall -9 haproxy 
平滑重启： ./sbin/haproxy -f  /data/soft/haproxy/conf/haproxy.cfg -st `cat /data/soft/haproxy/logs/haproxy.pid`

Haproxy安装完成后，会在/etc/init.d/目录下生成一个haproxy的脚本文件，这个脚本也可以用来启动和管理haproxy服务。
/etc/init.d/haproxy
Usage: /etc/init.d/haproxy {start|stop|status|checkconfig|restart|try-restart|reload|force-reload}

启动后访问地址：http://192.168.3.51:9188/haproxy-status 查看负载信息，账号密码：admin:admin~!@