传智播客Java学院传智.入云龙1nginx负载均衡高可用1.1什么是负载均衡高可用nginx作为负载均衡器,所有请求都到了nginx,可见nginx处于非常重点的位置,如果nginx服务器宕机后端web服务将无法提供服务,影响严重。为了屏蔽负载均衡服务器的宕机,需要建立一个备份机。主服务器和备份机上都运行高可用(HighAvailability)监控程序,通过传送诸如“Iamalive”这样的信息来监控对方的运行状况。当备份机不能在一定的时间内收到这样的信息时,它就接管主服务器的服务IP并继续提供负载均衡服务;当备份管理器又从主管理器收到“Iamalive”这样的信息时,它就释放服务IP地址,这样的主服务器就开始再次提供负载均衡服务。1.2keepalived+nginx实现主备1.2.1什么是keepalivedkeepalived是集群管理中保证集群高可用的一个服务软件,用来防止单点故障。Keepalived的作用是检测web服务器的状态,如果有一台web服务器死机,或工作出现故障,Keepalived将检测到,并将有故障的web服务器从系统中剔除,当web服务器工作正常后Keepalived自动将web服务器加入到服务器群中,这些工作全部自动完成,不需要人工干涉,需要人工做的只是修复故障的web服务器。1.2.2keepalived工作原理keepalived是以VRRP协议为实现基础的,VRRP全称VirtualRouterRedundancyProtocol,即虚拟路由冗余协议。虚拟路由冗余协议,可以认为是实现路由器高可用的协议,即将N台提供相同功能的路由器组成一个路由器组,这个组里面有一个master和多个backup,master上面有一个对外提供服务的vip(VIP=VirtualIPAddress,虚拟IP地址,该路由器所在局域网内其他机器的默认路由为该vip),master会发组播,当backup收不到VRRP包时就认为master宕掉了,这时就需要根据VRRP的优先级来选举一个backup当master。这样的话就可以保证路由器的高可用了。keepalived主要有三个模块,分别是core、check和VRRP。core模块为keepalived的核心,负责主进程的启动、维护以及全局配置文件的加载和解析。check负责健康检查,包括常见的各种检查方式。VRRP模块是来实现VRRP协议的。传智播客Java学院传智.入云龙详细参考:Keepalived权威指南中文.pdf1.2.3keepalived+nginx实现主备过程1.2.3.1初始状态VIP虚ip:192.168.101.100nginx负载均衡服务器(主)192.168.101.3keepalivednginx负载均衡服务器(备)192.168.101.3keepalived心跳tomat服务器群传智播客Java学院传智.入云龙1.2.3.2主机宕机VIP虚ip:192.168.101.100nginx负载均衡服务器(主)192.168.101.3keepalivednginx负载均衡服务器(备)192.168.101.3keepalived心跳tomat服务器群传智播客Java学院传智.入云龙1.2.3.3主机恢复1.2.4高可用环境两台nginx,一主一备:192.168.101.3和192.168.101.4两台tomcat服务器:192.168.101.5、192.168.101.61.2.5安装keepalived分别在主备nginx上安装keepalived,参考“安装手册”进行安装:VIP虚ip:192.168.101.100nginx负载均衡服务器(主)192.168.101.3keepalivednginx负载均衡服务器(备)192.168.101.3keepalived心跳tomat服务器群传智播客Java学院传智.入云龙1.2.6配置keepalived1.2.6.1主nginx修改主nginx下/etc/keepalived/keepalived.conf文件!ConfigurationFileforkeepalived#全局配置global_defs{notification_email{#指定keepalived在发生切换时需要发送email到的对象,一行一个XXX@XXX.com}notification_email_fromXXX@XXX.com#指定发件人#smtp_serverXXX.smtp.com#指定smtp服务器地址#smtp_connect_timeout30#指定smtp连接超时时间router_idLVS_DEVEL#运行keepalived机器的一个标识}vrrp_instanceVI_1{stateMASTER#标示状态为MASTER备份机为BACKUPinterfaceeth0#设置实例绑定的网卡virtual_router_id51#同一实例下virtual_router_id必须相同priority100#MASTER权重要高于BACKUP比如BACKUP为99advert_int1#MASTER与BACKUP负载均衡器之间同步检查的时间间隔,单位是秒authentication{#设置认证auth_typePASS#主从服务器验证方式auth_pass8888}virtual_ipaddress{#设置vip192.168.101.100#可以多个虚拟IP,换行即可}}传智播客Java学院传智.入云龙1.2.6.2备nginx修改备nginx下/etc/keepalived/keepalived.conf文件配置备nginx时需要注意:需要修改state为BACKUP,priority比MASTER低,virtual_router_id和master的值一致!ConfigurationFileforkeepalived#全局配置global_defs{notification_email{#指定keepalived在发生切换时需要发送email到的对象,一行一个XXX@XXX.com}notification_email_fromXXX@XXX.com#指定发件人#smtp_serverXXX.smtp.com#指定smtp服务器地址#smtp_connect_timeout30#指定smtp连接超时时间router_idLVS_DEVEL#运行keepalived机器的一个标识}vrrp_instanceVI_1{stateBACKUP#标示状态为MASTER备份机为BACKUPinterfaceeth0#设置实例绑定的网卡virtual_router_id51#同一实例下virtual_router_id必须相同priority99#MASTER权重要高于BACKUP比如BACKUP为99advert_int1#MASTER与BACKUP负载均衡器之间同步检查的时间间隔,单位是秒authentication{#设置认证auth_typePASS#主从服务器验证方式auth_pass8888}virtual_ipaddress{#设置vip192.168.101.100#可以多个虚拟IP,换行即可}}1.2.7测试主备nginx都启动keepalived及nginx。servicekeepalivedstart./nginx传智播客Java学院传智.入云龙1.2.7.1初始状态查看主nginx的eth0设置:vip绑定在主nginx的eth0上。查看备nginx的eth0设置:vip没有绑定在备nginx的eth0上。访问ccc.test.com,可以访问。1.2.7.2主机宕机将主nginx的keepalived停止或将主nginx关机(相当于模拟宕机),查看主nginx的eth0:eth0没有绑定vip注意这里模拟的是停止keepalived进程没有模拟宕机,所以还要将nginx进程也停止表示主nginx服务无法提供。查看备nginx的eth0:vip已经漂移到备nginx。访问ccc.test.com,可以访问。传智播客Java学院传智.入云龙1.2.7.3主机恢复将主nginx的keepalived和nginx都启动。查看主nginx的eth0:查看备nginx的eth0:vip漂移到主nginx。查看备nginx的eth0:eth0没有绑定vip访问:ccc.test.com,正常访问。注意:主nginx恢复时一定要将nginx也启动(通常nginx启动要加在开机启动中),否则即使vip漂移到主nginx也无法访问。1.2.8解决nginx进程和keepalived不同时存在问题1.2.8.1问题描述keepalived是通过检测keepalived进程是否存在判断服务器是否宕机,如果keepalived进程在但是nginx进程不在了那么keepalived是不会做主备切换,所以我们需要写个脚本来监控nginx进程是否存在,如果nginx不存在就将keepalived进程杀掉。1.2.8.2nginx进程检测脚本在主nginx上需要编写nginx进程检测脚本(check_nginx.sh),判断nginx进程是否存在,如果nginx不存在就将keepalived进程杀掉,check_nginx.sh内容如下:传智播客Java学院传智.入云龙#!/bin/bash#如果进程中没有nginx则将keepalived进程kill掉A=`ps-Cnginx--no-header|wc-l`##查看是否有nginx进程把值赋给变量Aif[$A-eq0];then##如果没有进程值得为零servicekeepalivedstop##则结束keepalived进程fi将check_nginx.sh拷贝至/etc/keepalived下,脚本测试:将nginx停止,将keepalived启动,执行脚本:sh/etc/keepalived/check_nginx.sh从执行可以看出自动将keepalived进程kill掉了。1.2.8.3修改keepalived.conf修改主nginx的keepalived.conf,添加脚本定义检测:注意下边红色标识地方:#全局配置global_defs{notification_email{#指定keepalived在发生切换时需要发送email到的对象,一行一个XXX@XXX.com}notification_email_frommiaoruntu@itcast.cn#指定发件人#smtp_serverXXX.smtp.com#指定smtp服务器地址#smtp_connect_timeout30#指定smtp连接超时时间router_idLVS_DEVEL#运行keepalived机器的一个标识}vrrp_scriptcheck_nginx{script/etc/keepalived/check_nginx.sh##监控脚本interval2##时间间隔,2秒weight2##权重}vrrp_instanceVI_1{stateMASTER#标示状态为MASTER备份机为BACKUPinterfaceeth0#设置实例绑定的网卡virtual_router_id51#同一实例下virtual_router_id必须相同priority100#MASTER权重要高于BACKUP比如BACKUP为99advert_int1#MASTER与BACKUP负载均衡器之间同步检查的时间间隔,单传智播客Java学院传智.入云龙位是秒authentication{#设置认证auth_typePASS#主从服务器验证方式auth_pass8888}track_script{check_nginx#监控脚本}virtual_ipaddress{#设置vip192.168.101.100#可以多个虚拟IP,换行即可}}修改后重启keepalived1.