189 8069 5689
这篇文章给大家介绍haproxy+keepalived如何搭建高可用负载均衡器，内容非常详细，感兴趣的小伙伴们可以参考借鉴，希望对大家能有所帮助。
企业业务量比较小的时候，单台服务器就可以满足业务需要了。但是随着业务发展，单服务器的问题就凸显出来了：
当服务器挂掉时，业务就会中断
当业务量增加，单台服务器性能变差，如何透明的扩展服务器和带宽，增加服务器吞吐量
负载均衡器可以解决以上问题
根据拓扑图，用haproxy和keepalived搭建一个负载均衡器
准备5台CentOS7.3主机和一个VIP地址:
准备一个可用IP用作虚拟IP(VIP):
VIP: 192.168.1.100
负载均衡器会用到2台主机，一主一备的架构
lb1(默认为主): 192.168.1.101
lb2(默认为备): 192.168.1.102
后端服务器集群中主机的IP地址
s1: 192.168.1.2
s2: 192.168.1.3
s3: 192.168.1.4
systemctl stop firewalld systemctl disable firewalld
setenforce 0 vi /etc/selinux/config SELINUX=disabled
lb1和lb2上安装haproxy和keepalived
yum install haproxy keepalived -y
s1 s2 s3上安装nginx，目的是把nginx作为后端，如果有其他后端程序，这一步可以省略
yum install epel-release -y yum install nginx -y
KeepAlived是基于VRRP(Virtual Router Redundancy Protocol，虚拟路由冗余协议)实现的一个高可用方案，通过VIP（虚拟IP）和心跳检测来实现高可用
Keepalived有两个角色，Master和Backup。一般会是１个Master,多个Backup。
Master会绑定VIP到自己网卡上，对外提供服务。Master和Backup会定时确定对方状态，当Master不可用的时候，Backup会通知网关，并把VIP绑定到自己的网卡上，实现服务不中断，高可用
编辑lb1(192.168.1.101)上的/etc/keepalived/keepalived.conf
! Configuration File for keepalived
global_defs { # 通知邮件服务器的配置
notification_email { # 当master失去VIP或则VIP的时候，会发一封通知邮件到your-email@qq.com
your-email@qq.com
} # 发件人信息
notification_email_from keepalived@qq.com # 邮件服务器地址
smtp_server 127.0.0.1 # 邮件服务器超时时间
smtp_connect_timeout 30 # 邮件TITLE
router_id LVS_DEVEL
}
vrrp_instance VI_1 { # 主机: MASTER
# 备机: BACKUP
state MASTER # 实例绑定的网卡, 用ip a命令查看网卡编号
interface eno16777984 # 虚拟路由标识，这个标识是一个数字(1-255)，在一个VRRP实例中主备服务器ID必须一样
virtual_router_id 88 # 优先级，数字越大优先级越高，在一个实例中主服务器优先级要高于备服务器
priority 100 # 主备之间同步检查的时间间隔单位秒
advert_int 1 # 验证类型和密码
authentication { # 验证类型有两种 PASS和HA
auth_type PASS # 验证密码，在一个实例中主备密码保持一样
auth_pass 11111111
} # 虚拟IP地址,可以有多个，每行一个
virtual_ipaddress {
192.168.1.100
}
}
virtual_server 192.168.1.100 443 { # 健康检查时间间隔
delay_loop 6 # 调度算法
# Doc: http://www.keepalived.org/doc/scheduling_algorithms.html
# Round Robin (rr)
# Weighted Round Robin (wrr)
# Least Connection (lc)
# Weighted Least Connection (wlc)
# Locality-Based Least Connection (lblc)
# Locality-Based Least Connection with Replication (lblcr)
# Destination Hashing (dh)
# Source Hashing (sh)
# Shortest Expected Delay (seq)
# Never Queue (nq)
# Overflow-Connection (ovf)
lb_algo rr
lb_kind NAT
persistence_timeout 50
protocol TCP # 通过调度算法把Master切换到真实的负载均衡服务器上
# 真实的主机会定期确定进行健康检查，如果MASTER不可用，则切换到备机上
real_server 192.168.1.101 443 {
weight 1
TCP_CHECK { # 连接超端口
connect_port 443 # 连接超时时间
connect_timeout 3
}
}
real_server 192.168.1.102 443 {
weight 1
TCP_CHECK {
connect_port 443
connect_timeout 3
}
}
}编辑lb2(192.168.1.102)上的/etc/keepalived/keepalived.conf
! Configuration File for keepalived
global_defs { # 通知邮件服务器的配置
notification_email { # 当master失去VIP或则VIP的时候，会发一封通知邮件到your-email@qq.com
your-email@qq.com
} # 发件人信息
notification_email_from keepalived@qq.com # 邮件服务器地址
smtp_server 127.0.0.1 # 邮件服务器超时时间
smtp_connect_timeout 30 # 邮件TITLE
router_id LVS_DEVEL
}
vrrp_instance VI_1 { # 主机: MASTER
# 备机: BACKUP
state BACKUP # 实例绑定的网卡, 用ip a命令查看网卡编号
interface eno16777984 # 虚拟路由标识，这个标识是一个数字(1-255)，在一个VRRP实例中主备服务器ID必须一样
virtual_router_id 88 # 优先级，数字越大优先级越高，在一个实例中主服务器优先级要高于备服务器
priority 99 # 主备之间同步检查的时间间隔单位秒
advert_int 1 # 验证类型和密码
authentication { # 验证类型有两种 PASS和HA
auth_type PASS # 验证密码，在一个实例中主备密码保持一样
auth_pass 11111111
} # 虚拟IP地址,可以有多个，每行一个
virtual_ipaddress {
192.168.1.100
}
}
virtual_server 192.168.1.100 443 { # 健康检查时间间隔
delay_loop 6 # 调度算法
# Doc: http://www.keepalived.org/doc/scheduling_algorithms.html
# Round Robin (rr)
# Weighted Round Robin (wrr)
# Least Connection (lc)
# Weighted Least Connection (wlc)
# Locality-Based Least Connection (lblc)
# Locality-Based Least Connection with Replication (lblcr)
# Destination Hashing (dh)
# Source Hashing (sh)
# Shortest Expected Delay (seq)
# Never Queue (nq)
# Overflow-Connection (ovf)
lb_algo rr
lb_kind NAT
persistence_timeout 50
protocol TCP # 通过调度算法把Master切换到真实的负载均衡服务器上
# 真实的主机会定期确定进行健康检查，如果MASTER不可用，则切换到备机上
real_server 192.168.1.101 443 {
weight 1
TCP_CHECK { # 连接超端口
connect_port 443 # 连接超时时间
connect_timeout 3
}
}
real_server 192.168.1.102 443 {
weight 1
TCP_CHECK {
connect_port 443
connect_timeout 3
}
}
}编辑lb1(192.168.1.101)和lb2(192.168.1.102)上的/etc/haproxy/haproxy.cfg
把后端服务器IP(192.168.1.2, 192.168.1.3, 192.168.1.4)加到backend里
#---------------------------------------------------------------------# Global settings#---------------------------------------------------------------------global log 127.0.0.1 local2
chroot /var/lib/haproxy
pidfile /var/run/haproxy.pid
maxconn 4096
user haproxy
group haproxy
daemon # turn on stats unix socket
stats socket /var/lib/haproxy/stats
listen stats bind *:9000
mode http
stats enable
stats hide-version
stats uri /stats
stats refresh 30s
stats realm Haproxy\ Statistics
stats auth admin:admin
frontend k8s-api bind *:443
mode tcp
option tcplog
tcp-request inspect-delay 5s
tcp-request content accept if { req_ssl_hello_type 1 }
default_backend k8s-api-backend
backend k8s-api-backend
mode tcp
option tcplog
option tcp-check
balance roundrobin
server master1 192.167.1.2:80 maxconn 1024 weight 5 check
server master2 192.167.1.3:80 maxconn 1024 weight 5 check
server master3 192.167.1.4:80 maxconn 1024 weight 5 check给nginx添加SSL证书，配置过程略
vi /usr/share/nginx/html/index.html
把index.html里面字符串Welcome to nginx改成Welcome to nginx HA
sudo systemctl start nginx sudo systemctl enable nginx
sudo systemctl start haproxy sudo systemctl enable haproxy
sudo systemctl start keepalived sudo systemctl enable keepalived
在MASTER上运行ip a