12月19日任务

18.1 集群介绍

18.2 keepalived介绍 18.3/18.4/18.5 用keepalived配置高可用集群

一.集群介绍

• 根据功能划分为两大类：高可用和负载均衡  
• 高可用集群通常为两台服务器，一台工作，另外一台作为冗余，当提供服务的机器宕机，冗余将接替继续提供服务 ，保证最大化可用性
• 实现高可用的开源软件有：heartbeat、keepalived  ，在centos 6 里，heartbeat 有很多bug，而且也很久没有更新了，建议使用后面那个。
• 负载均衡集群，需要有一台服务器作为分发器，它负责把用户的请求分发给后端的服务器处理，在这个集群里，除了分发器外，就是给用户提供服务的服务器了，这些服务器数量至少为2  
• 实现负载均衡的开源软件有LVS、keepalived、haproxy、nginx，商业的负载均衡器有F5、Netscaler

 

二.keepalived介绍

• 在这里我们使用keepalived来实现高可用集群，因为heartbeat在centos6上有一些问题，影响实验效果  
• keepalived通过VRRP（Virtual Router Redundancy Protocl）来实现高可用。  
• 在这个协议里会将多台功能相同的路由器组成一个小组，这个小组里会有1个master角色和N（N>=1）个backup角色。  
• master会通过组播的形式向各个backup发送VRRP协议的数据包，当backup收不到master发来的VRRP数据包时，就会认为master宕机了。此时就需要根据各个backup的优先级来决定谁成为新的mater。  
• Keepalived要有三个模块，分别是core、check和vrrp。其中core模块为keepalived的核心，负责主进程的启动、维护以及全局配置文件的加载和解析，check模块负责健康检查，vrrp模块是来实现VRRP协议的。

 

三.用Keepalived配置高可用集群（上）（中）（下）

示例一：

• 准备两台机器130和132，130作为master，132作为backup  两台机器都执行yum install -y keepalived  

• 两台机器都安装nginx，其中130上已经编译安装过nginx，132上需要yum安装nginx: yum install -y nginx  
•  执行命令：> /etc/keepalived/keepalived.conf   清空该文件
• vim /etc/keepalived/keepalived.conf 
• 编辑130上keepalived配置文件，内容从https://coding.net/u/aminglinux/p/aminglinux-book/git/blob/master/D21Z/master_keepalived.conf获取：  

  global_defs {

     notification_email {
       aming@aminglinux.com
     }
     notification_email_from root@aminglinux.com
     smtp_server 127.0.0.1
     smtp_connect_timeout 30
     router_id LVS_DEVEL
  }

  vrrp_script chk_nginx {

      script "/usr/local/sbin/check_ng.sh"  检测服务是否正常
      interval 3   检测3秒钟
  }

  vrrp_instance VI_1 {

      state MASTER
      interface ens33
      virtual_router_id 51   定义路由器的id
      priority 100   权重
      advert_int 1
      authentication {      认证相关的信息
          auth_type PASS
          auth_pass aminglinux>com
      }
      virtual_ipaddress {    定义VIP的，共有ip。
          192.168.188.100
      }

      track_script {

          chk_nginx
      }

  }

• vim /usr/local/sbin/check_ng.sh 编辑文件
• 130编辑监控脚本，内容从https://coding.net/u/aminglinux/p/aminglinux-book/git/blob/master/D21Z/master_check_ng.sh获取 ：

#!/bin/bash

#时间变量，用于记录日志 d=`date --date today +%Y%m%d_%H:%M:%S` #计算nginx进程数量 n=`ps -C nginx --no-heading|wc -l` #如果进程为0，则启动nginx，并且再次检测nginx进程数量， #如果还为0，说明nginx无法启动，此时需要关闭keepalived if [ $n -eq "0" ]; then         /etc/init.d/nginx start         n2=`ps -C nginx --no-heading|wc -l`         if [ $n2 -eq "0"  ]; then                 echo "$d nginx down,keepalived will stop" >> /var/log/check_ng.log                 systemctl stop keepalived         fi fi

 

• chmod 755 /usr/local/sbin/check_ng.sh 给脚本755权限  
• systemctl start  keepalived 130启动服务
• ps aux |grep keepalived 查看进程是否运行起来

• /etc/init.d/nginx stop 关闭Nginx，你会发现，它又会自动启动起来的

• cat /var/log/messages  日志存放位置
• ip addr 才能查看到，ifconfig命令是查看不到的

• 检查130和132机器是否启动了防火墙，selinux，启动了的话，就都关闭掉，方便后面做实验。

配置从

• 执行命令：> /etc/keepalived/keepalived.conf   清空该文件
• vim  /etc/keepalived/keepalived.conf 

• 132上编辑配置文件，内容从https://coding.net/u/aminglinux/p/aminglinux-book/git/blob/master/D21Z/backup_keepalived.conf获取:

global_defs {

   notification_email {      aming@aminglinux.com    }    notification_email_from root@aminglinux.com    smtp_server 127.0.0.1    smtp_connect_timeout 30    router_id LVS_DEVEL }

vrrp_script chk_nginx {

    script "/usr/local/sbin/check_ng.sh"     interval 3 }

vrrp_instance VI_1 {

    state BACKUP     interface ens33     virtual_router_id 51     priority 90     advert_int 1     authentication {         auth_type PASS         auth_pass aminglinux>com     }     virtual_ipaddress {         192.168.133.100     }

    track_script {

        chk_nginx     }

}

 

• vim /usr/local/sbin/check_ng.sh 编辑监控脚本
• 132上编辑监控脚本，内容从https://coding.net/u/aminglinux/p/aminglinux-book/git/blob/master/D21Z/backup_check_ng.sh获取  ：

#时间变量，用于记录日志

d=`date --date today +%Y%m%d_%H:%M:%S` #计算nginx进程数量 n=`ps -C nginx --no-heading|wc -l` #如果进程为0，则启动nginx，并且再次检测nginx进程数量， #如果还为0，说明nginx无法启动，此时需要关闭keepalived if [ $n -eq "0" ]; then         systemctl start nginx    启动命令（跟主不一样，因为这个是yum安装的，主是编译安装的）         n2=`ps -C nginx --no-heading|wc -l`         if [ $n2 -eq "0"  ]; then                 echo "$d nginx down,keepalived will stop" >> /var/log/check_ng.log                 systemctl stop keepalived         fi fi  

• chmod /usr/local/sbin/check_ng.sh 给监控脚本755权限  
• 132上也启动服务 systemctl start keepalived
• ps aux |grep keepalived 查看进程是否运行起来

• 先确定好两台机器上nginx差异，比如可以通过curl -I 来查看nginx版本  

测试1：关闭master上的nginx服务  （不好模拟演示）

测试2：在master上增加iptabls规则 （不好模拟演示）

 iptables -I OUTPUT -p vrrp -j DROP  

测试3：关闭master上的keepalived服务  

• systemctl stop keepalived 关闭主的Keepalived服务

• 查看从上是否绑定了vip100

• curl -l 192.168.133.132 就会发现绑定的vip100到了从上，显示的内容是从的默认主机访问页面。

测试4：启动master上的keepalived服务（不好模拟演示）