LVS+Keepalived+nginx实现负载均衡集群


  • LVS:一种四层负载均衡器,软负载均衡,完成所有负载均衡业务需求,比如数据库、web服务、虚拟化技术。Linux2.4内核之后,默认集成。
  • Keepalived:LVS基础之上,实现心跳检测、监控服务器实现故障转移,如果服务器发生宕机,可以尝试自动重试脚本。

安装keepalived

下载keepalived

wget http://www.keepalived.org/software/keepalived-1.2.18.tar.gz

解压安装

tar -zxvf keepalived-1.2.18.tar.gz -C /usr/local/

下载插件

yum install -y openssl openssl-devel
yum -y install libnl libnl-devel

开始编译keepalived

./configure --prefix=/usr/local/keepalived

如果报错: keepalived执行./configure –prefix=/usr/local/keepalived时报错:configure: error: Popt libraries is required
出现此错误的原因:未安装popt的开发包
解决方法:

yum install popt-devel

安装好popt的开发包。重新./configure 即可。

keepalived安装成Linux系统服务
将keepalived安装成Linux系统服务,因为没有使用keepalived的默认安装路径(默认路径:/usr/local),安装完成之后,需要做一些修改工作:
首先创建文件夹,将keepalived配置文件进行复制:

mkdir /etc/keepalived
cp /usr/local/keepalived/etc/keepalived/keepalived.conf /etc/keepalived/
然后复制keepalived脚本文件:
cp /usr/local/keepalived/etc/rc.d/init.d/keepalived /etc/init.d/
cp /usr/local/keepalived/etc/sysconfig/keepalived /etc/sysconfig/
ln -s /usr/local/sbin/keepalived /usr/sbin/
ln -s /usr/local/keepalived/sbin/keepalived /sbin/

可以设置开机启动:chkconfig keepalived on,到此我们安装完毕!

配置keepalived

vim /etc/keepalived/keepalived.conf

! Configuration File for keepalived

vrrp_script chk_nginx {
    script "/etc/keepalived/nginx_check.sh" #运行脚本,脚本内容下面有,就是起到一个nginx宕机以后,自动开启服务
    interval 2 #检测时间间隔
    weight -20 #如果条件成立的话,则权重 -20
}
# 定义虚拟路由,VI_1 为虚拟路由的标示符,自己定义名称
vrrp_instance VI_1 {
    ###MASTER 主的意思  BACKUP 从
    state MASTER #来决定主从
    interface eth0 # 绑定虚拟 IP 的网络接口,根据自己的机器填写
    virtual_router_id 121 # 虚拟路由的 ID 号, 两个节点设置必须一样
    mcast_src_ip 10.0.0.13 #填写本机ip
    priority 100 # 节点优先级,主要比从节点优先级高
    nopreempt # 优先级高的设置 nopreempt 解决异常恢复后再次抢占的问题
    advert_int 1 # 组播信息发送间隔,两个节点设置必须一样,默认 1s
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    # 将 track_script 块加入 instance 配置块
    track_script {
        chk_nginx #执行 Nginx 监控的服务
    }
    ### 虚拟IP地址配置规范 假设192.168.212.143
    virtual_ipaddress {
        10.0.0.20 # 虚拟ip,也就是解决写死程序的ip怎么能切换的ip,也可扩展,用途广泛。可配置多个。
    }
}

nginx重启脚本

nginx_check.sh

#!/bin/bash
A=`ps -C nginx –no-header |wc -l`
if [ $A -eq 0 ];then
    /usr/local/nginx/sbin/nginx
    sleep 2
    if [ `ps -C nginx --no-header |wc -l` -eq 0 ];then
        killall keepalived
    fi
fi

假设有三个节点,两个虚拟ip: 192.168.208.100,192.168.208.101,三个节点都正常的话,两个ip都访问master节点。如果master节点挂了,我们要让192.168.208.100访问node1节点,192.168.208.101访问node2节点。

master节点配置

# 定义虚拟路由,VI_1 为虚拟路由的标示符,自己定义名称
vrrp_instance VI_1 {
    ###MASTER 主的意思  BACKUP 从
    state MASTER #来决定主从
    interface ens33 # 绑定虚拟 IP 的网络接口,根据自己的机器填写
    virtual_router_id 121 # 虚拟路由的 ID 号, 两个节点设置必须一样
    mcast_src_ip 192.168.208.129 #填写本机ip
    priority 100 # 节点优先级,主要比从节点优先级高
    nopreempt # 优先级高的设置 nopreempt 解决异常恢复后再次抢占的问题
    advert_int 1 # 组播信息发送间隔,两个节点设置必须一样,默认 1s
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    ### 虚拟IP地址配置规范 假设192.168.212.143
    virtual_ipaddress {
        192.168.208.100 # 虚拟ip,也就是解决写死程序的ip怎么能切换的ip,也可扩展,用途广泛。可配置多个。
     }
}


vrrp_instance VI_2 {
    ###MASTER 主的意思  BACKUP 从
    state MASTER #来决定主从
    interface ens33 # 绑定虚拟 IP 的网络接口,根据自己的机器填写
    virtual_router_id 122 # 虚拟路由的 ID 号, 两个节点设置必须一样
    mcast_src_ip 192.168.208.129 #填写本机ip
    priority 100 # 节点优先级,主要比从节点优先级高
    nopreempt # 优先级高的设置 nopreempt 解决异常恢复后再次抢占的问题
    advert_int 1 # 组播信息发送间隔,两个节点设置必须一样,默认 1s
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    ### 虚拟IP地址配置规范 假设192.168.212.143
    virtual_ipaddress {
        192.168.208.101
     }
}

node1节点配置

! Configuration File for keepalived
# 定义虚拟路由,VI_1 为虚拟路由的标示符,自己定义名称
vrrp_instance VI_1 {
    ###MASTER 主的意思  BACKUP 从
    state BACKUP #来决定主从
    interface ens33 # 绑定虚拟 IP 的网络接口,根据自己的机器填写
    virtual_router_id 121 # 虚拟路由的 ID 号, 两个节点设置必须一样
    mcast_src_ip 192.168.208.131 #填写本机ip
    priority 40 # 节点优先级,主要比从节点优先级高
    nopreempt # 优先级高的设置 nopreempt 解决异常恢复后再次抢占的问题
    advert_int 1 # 组播信息发送间隔,两个节点设置必须一样,默认 1s
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    # 将 track_script 块加入 instance 配置块
    track_script {
        chk_nginx #执行 Nginx 监控的服务
    }
    ### 虚拟IP地址配置规范 假设192.168.212.143
    virtual_ipaddress {
        192.168.208.100 # 虚拟ip,也就是解决写死程序的ip怎么能切换的ip,也可扩展,用途广泛。可配置多个。
    }
}

node2节点配置

! Configuration File for keepalived
vrrp_instance VI_2 {
    ###MASTER 主的意思  BACKUP 从
    state BACUUP #来决定主从
    interface ens33 # 绑定虚拟 IP 的网络接口,根据自己的机器填写
    virtual_router_id 122 # 虚拟路由的 ID 号, 两个节点设置必须一样
    mcast_src_ip 192.168.208.129 #填写本机ip
    priority 100 # 节点优先级,主要比从节点优先级高
    nopreempt # 优先级高的设置 nopreempt 解决异常恢复后再次抢占的问题
    advert_int 1 # 组播信息发送间隔,两个节点设置必须一样,默认 1s
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    # 将 track_script 块加入 instance 配置块
    track_script {
        chk_nginx #执行 Nginx 监控的服务
    }
    ### 虚拟IP地址配置规范 假设192.168.212.143
    virtual_ipaddress {
        192.168.208.101
     }
}

Author: Re:0
Reprint policy: All articles in this blog are used except for special statements CC BY 4.0 reprint policy. If reproduced, please indicate source Re:0 !
 Previous
关于注册中心的一些讨论 关于注册中心的一些讨论
今天在家水群的时候,发现群里在讨论关于注册中心的选择,Zookeeper,Nacos,Eureka到底是用哪个。有人说用Zookeeper好,有人说Nacos好,各有各的说法。具体怎么好,也没人说上来。其实说来说去,就是在CAP定理中,选择
2022-04-25
Next 
基于zookeeper实现分布式锁 基于zookeeper实现分布式锁
对于锁大家肯定不会陌生,在Java中synchronized关键字和ReentrantLock可重入锁在我们的代码中是经常见的,一般我们用其在多线程环境中控制对资源的并发访问,但是随着分布式的快速发展,本地的加锁往往不能满足我们的需要,在我
2022-04-22
  TOC