# IT明星不是梦 #MySQL高可用集群之基于MyCat部署HaProxy实现高可用

在实际项目中， Mycat 服务也需要考虑高可用性，如果 Mycat 所在服务器出现宕机，或 Mycat 服务故障，需要有备机提供服务，需要考虑 Mycat 集群。

一、高可用方案

可以使用 HAProxy+Keepalived配合两台MyCat搭起MyCat集群，实现高可用性。 HAProxy实现了MyCat多节点的集群高可用和负载均衡，而 HAProxy自身的高可用则可以通过Keepalived来实现.

架构图：

于上一个博客的环境部署（MySQL中间件之MyCat ）

新添：

mycat02、haproxy01、haproxy02

案例中关闭防火墙

启动两台mycat服务

[ mycat]# ./bin/mycat start
[ mycat2]# ./bin/mycat start

测试连接mycat（可以连接自己，并且可以连接到另一台mycat）

[ ~]# mysql -umycat -p123456 -P8066 -h 192.168.1.3
[ ~]# mysql -umycat -p123456 -P8066 -h 192.168.1.11
[ ~]# mysql -umycat -p123456 -P8066 -h 192.168.1.11
[ ~]# mysql -umycat -p123456 -P8066 -h 192.168.1.3

1、安装配置 HAProxy(haproxy01、haproxy02）

1）安装 HAProxy 准备好HAProxy安装包，传到/opt目录下 解压到/usr/local/src

[ ~]# tar zxf haproxy-1.8.23.tar.gz -C /usr/local/src/

2）进入解压后的目录，查看内核版本， 进行编译

[ ~]# cd /usr/local/src/haproxy-1.8.23/ 
[ haproxy-1.8.23]# make TARGET=linux310 PREFIX=/usr/local/haproxy ARCH=x86_64

ARGET=linux310，内核版本，使用uname -r查看内核，如： 3.10.0-514.el7，此时该参数就为linux310；
ARCH=x86_64，系统位数；
PREFIX=/usr/local/haprpxy #/usr/local/haprpxy，为haprpxy安装路径。

3）编译完成后，进行安装

[ haproxy-1.8.23]# make install PREFIX=/usr/local/haproxy

编辑配置文件(文件内容自己定义)：

[ haproxy-1.8.23]# vim /usr/local/haproxy/haproxy.conf
global
        log 127.0.0.1 local0
        #log 127.0.0.1 local1 notice
        #log loghost local0 info
        maxconn 4096
        chroot /usr/local/haproxy
        pidfile /usr/local/haproxy/haproxy.pid
        uid 99
        gid 99
        daemon
        #debug
        #quiet
defaults
        log global
        mode tcp
        option abortonclose
        option redispatch
        retries 3
        maxconn 2000
        timeout connect 5000
        timeout client 50000
        timeout server 50000
listen proxy_status
        bind :48066
                mode tcp
                balance roundrobin
                server mycat_1 192.168.1.3:8066 check inter 10s  //mycat服务器IP地址
                server mycat_2 192.168.1.11:8066 check inter 10s  //mycat服务器IP地址
frontend admin_stats
        bind :7777
                mode http
                stats enable
                option httplog
                maxconn 10
                stats refresh 30s
                stats uri /admin   //访问web用户名
                stats auth admin:123123      //定义密码
                stats hide-version
                stats admin if TRUE

4）验证启动HAProxy

[ haproxy-1.8.23]#  /usr/local/haproxy/sbin/haproxy -f /usr/local/haproxy/haproxy.conf

查看HAProxy进程

[ haproxy-1.8.23]# ps -ef|grep haproxy

打开浏览器访问 http://192.168.1.4:7777/admin、http://192.168.1.5:7777/admin
在弹出框输入用户名： admin密码： 123123
访问第一台：


访问第二台：

验证负载均衡，通过HAProxy访问Mycat

[ ~]# scp /usr/local/mysql/bin/mysql 192.168.1.4:/usr/local/sbin/
[ ~]# scp /usr/local/mysql/bin/mysql 192.168.1.5:/usr/local/sbin/

[ haproxy-1.8.23]# mysql -umycat -p123456 -h 192.168.1.4 -P 48066
[ haproxy-1.8.23]# mysql -umycat -p123456 -h 192.168.1.5 -P 48066

2、安装配置keepalived（两台haproxy）

1）安装 Keepalived 准备好Keepalived安装包，传到/opt目录下 解压到/usr/local/src

[ ~]# tar zxf keepalived-2.0.20.tar.gz -C /usr/local/src/

安装依赖插件

[ ~]# yum -y install gcc openssl-devel popt-devel

进入解压后的目录， 进行配置， 进行编译

[ ~]# cd /usr/local/src/keepalived-2.0.20/
[ keepalived-2.0.20]# ./configure --prefix=/usr/local/keepalived

完成后进行安装

[ keepalived-2.0.20]# make && make install

运行前配置

[ keepalived-2.0.20]#  cp /usr/local/src/keepalived-2.0.20/keepalived/etc/init.d/keepalived /etc/init.d/
[ keepalived-2.0.20]# mkdir /etc/keepalived
[ keepalived-2.0.20]# cp /usr/local/keepalived/etc/keepalived/keepalived.conf /etc/keepalived/[ keepalived-2.0.20]# cp /usr/local/src/keepalived-2.0.20/keepalived/etc/sysconfig/keepalived /etc/sysconfig/
[ keepalived-2.0.20]# cp /usr/local/keepalived/sbin/keepalived /usr/sbin/

修改配置文件

[ keepalived-2.0.20]# vim /etc/keepalived/keepalived.conf
! Configuration File for keepalived   //注释

global_defs {
   router_id LVS_DEVEL      //keepalived服务器的一个标识
}

vrrp_instance VI_1 {
    state MASTER     //指定keepalived的角色, 两台配置此处均是BACKUP,设为BACKUP将根据优先级决定主或从
    interface ens33     //指定HA监测网络的接口
    virtual_router_id 51   //虚拟路由标识，这个标识是一个数字(取值在0-255之间,用来区分多个instance的VRRP组播)，同一个vrrp实例使用唯一的标识,确保和master2相同，同网内不同集群此项必须不同,否则发生冲突。
    priority 100   //用来选举master的，要成为master，该项取值范围是1-255（在此范围之外会被识别成默认值100）,此处master2上设置为50
    advert_int 1    //发VRRP包的时间间隔，即多久进行一次master选举（可以认为是健康查检时间间隔）
    authentication {     //认证区域，认证类型有PASS和HA（IPSEC），推荐使用PASS（密码只识别前8位）
        auth_type PASS
        auth_pass 1111
    }   
    virtual_ipaddress {      //VIP区域，指定vip地址
        192.168.1.100 
    }   
}   

virtual_server 192.168.1.100 48066 {    //设置虚拟服务器，需要指定虚拟IP地址和服务端口，IP与端口之间用空格隔开
    delay_loop 6     //设置运行情况检查时间，单位是秒
    lb_algo rr          //设置后端调度算法，这里设置为rr，即轮询算法
    lb_kind NAT      //设置LVS实现负载均衡的机制，有NAT、TUN、DR三个模式可选
    persistence_timeout 50    //会话保持时间，单位是秒。这个选项对动态网页是非常有用的，为集群系统中的session共享提供了一个很好的解决方案。有了这个会话保持功能，用户的请求会被一直分发到某个服务节点，直到超过这个会话的保持时间。
    protocol TCP    //指定转发协议类型，有TCP和UDP两种

    real_server 192.168.1.4 48066 {    //配置服务节点1，需要指定real server的真实IP地址和端口，IP与端口之间用空格隔开
        weight 1     //配置服务节点的权值，权值大小用数字表示，数字越大，权值越高，设置权值大小为了区分不同性能的服务器
        TCP_CHECK {
            connect_timeout 3    //连接超时时间
            retry 3    //重连次数
            delay_before_retry 3   //重连间隔时间
        }   
    }   
    real_server 192.168.1.5 48066 {
        weight 1
        TCP_CHECK {
            connect_timeout 3
            retry 3
            delay_before_retry 3
        }
    }
}

拷贝到第二台haproxy

[ keepalived-2.0.20]# scp /etc/keepalived/keepalived.conf 192.168.1.5:/etc/keepalived/keepalived.conf

做一些简单修改

[ keepalived-2.0.20]# vim /etc/keepalived/keepalived.conf
! Configuration File for keepalived

global_defs {
   router_id LVS_DEVEL
}

vrrp_instance VI_2 {   //改
    state MASTER
    interface ens33
    virtual_router_id 51
    priority 50     //降低
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        192.168.1.100
    }
}

virtual_server 192.168.1.100 48066 {
    delay_loop 6
    lb_algo rr
    lb_kind NAT
    persistence_timeout 50
    protocol TCP

    real_server 192.168.1.4 48066 {
        weight 1
        TCP_CHECK {
            connect_timeout 3
            retry 3
            delay_before_retry 3
        }
    }
    real_server 192.168.1.5 48066 {
        weight 1
        TCP_CHECK {
            connect_timeout 3
            retry 3
            delay_before_retry 3
        }   
    }   
}

2）启动验证

[ keepalived-2.0.20]# service keepalived start
Starting keepalived (via systemctl):                       [  OK  ]
[ keepalived-2.0.20]# ip a

开启第二台的服务

[ keepalived-2.0.20]# service keepalived start
Starting keepalived (via systemctl):                       [  OK  ]

登录验证（访问VIP地址）

[ keepalived-2.0.20]# mysql -umycat -p123456 -h192.168.1.100 -P 48066

模拟第一台mycat宕机：

[ ~]# ./mycat/bin/mycat stop

继续通过haproxy（VIP）访问：

[ keepalived-2.0.20]# mysql -umycat -p123456 -h 192.168.1.100 -P 48066

依然可以访问到

模拟第一台haproxy宕机
断开网卡连接

可以看到VIP跳到了第二台服务器

[ keepalived-2.0.20]# ip a

继续通过haproxy（VIP）访问：

[ keepalived-2.0.20]# mysql -umycat -p123456 -h 192.168.1.5 -P 48066

依然能够访问到服务

[ ~]# ./mycat/bin/mycat start     //将第一台mycat启动

高可用已经部署完成

二、MyCat 安全设置

1、权限配置

1）user 标签权限控制目前 Mycat 对于中间件的连接控制并没有做太复杂的控制，目前只做了中间件逻辑级别的读写权限控制。是通过server.xml的user标签进行配置。

#server.xml配置文件user部分

2）privileges 标签权限控制 在 user 标签下的 privileges 标签可以对逻辑库（schema）、表（table）进行精细化的DML权限控制。privileges 标签下的check属性，如为 true 开启权限检查，为false不开启，默认为 false。由于Mycat一个用户的 schemas 属性可配置多个逻辑库（schema），所以 privileges 的下级节点schema节点同样可配置多个，对多库多表进行细粒度的 DML 权限控制.

#server.xml配置文件privileges部分
#配置orders表没有增删改查权限

配置说明：

2、SQL 拦截

firewall 标签用来定义防火墙:
firewall下whitehost标签用来定义IP白名单， blacklist用来定义SQL 黑名单。

1）白名单 可以通过设置白名单， 实现某主机某用户可以访问 Mycat，而其他主机用户禁止访问。

设置白名单
#server.xml配置文件firewall标签
#配置只有192.168.1.4主机可以通过mycat用户访问
        <firewall> 
           <whitehost>
              <host host="192.168.1.4" user="mycat"/>
           </whitehost>
        </firewall>

2）黑名单可以通过设置黑名单，实现Mycat对具体SQL操作的拦截，如增删改查等操作的拦截。

设置黑名单
#server.xml配置文件firewall标签
#配置禁止mycat用户进行删除操作
        <firewall> 
           <whitehost>
              <host host="192.168.1.4" user="mycat"/>
           </whitehost>
       <blacklist check="true">
       <property name="deleteAllow">false</property>
       </blacklist>
        </firewall>

可以设置的黑名单 SQL 拦截功能列表