mycat如何實現高可用

這篇文章將為大家詳細講解有關mycat如何實現高可用，小編覺得挺實用的，因此分享給大家做個參考，希望大家閱讀完這篇文章后可以有所收獲。

1 mycat 集群

mycat 可以通過 zookeeper 集群進行配置文件管理

1.1 搭建 zookeeper 集群

此處不做 zookeeper集群搭建講解

1.2配置mycat支持zookeeper

修改 mycat conf 目錄下myid.properties

loadZk=true
# zk集群地址，多個用","隔開
zkURL=192.162.3.31:2121,192.162.3.32:2121,192.162.3.33:2121
# zk集群內Mycat集群ID
clusterId=mycat-cluster-1
# Mycat集群內本實例ID，禁止重復
myid=mycat_fz_01
# Mycat集群內節點個數
clusterSize=3
#集群內所有節點的 id
clusterNodes=mycat_fz_01,mycat_fz_02,mycat_fz_03
#server  booster  ;   booster install on db same server,will reset all minCon to 1
type=server
boosterDataHosts=dataHost1

1.3 自定義配置

將需要修改的配置文件替換到 conf 目錄中的 zkconf 目錄下,只需要在一臺機器修改即可,需要注意 conf目錄中的 server.xml 中用戶名和密碼與 zkconf 中的不一致

1.4 上傳配置

執行修改了配置文件的 mycat 下的bin 目錄下的initzkdata.sh,上傳配置文件,(在修改了配置文件的機器上執行)

./initzkdata.sh

1.5 啟動所有 mycat

啟動后發現其他 mycat conf 下的配置文件已經自動變化為修改的內容,是zookeeper 中下載的

2 mycat 高可用

此處使用的是 lvs+keepalived 的方式

LVS+Keepalived 介紹

LVS
LVS是Linux Virtual Server的簡寫，意即Linux虛擬服務器，是一個虛擬的服務器集群系統。本項目在1992年5月由章文嵩博士成立，是中國國內最早出現的自由軟件項目之一。目前有三種IP負載均衡技術（VS/NAT、VS/TUN和VS/DR），十種調度算法（rrr|wrr|lc|wlc|lblc|lblcr|dh|sh|sed|nq）。

Keepalvied
Keepalived在這里主要用作RealServer的健康狀態檢查以及Master主機和BackUP主機之間failover的實現

下面，搭建基于LVS+Keepalived的MyCAT高可用負載均衡集群，其中，LVS實現MyCAT的負載均衡，但是，簡單的LVS不能監控后端節點是否健康，它只是基于具體的調度算法對后端服務節點進行訪問。同時，單一的LVS又存在單點故障的風險。在這里，引進了Keepalived，可以實現以下幾個功能：

1. 檢測后端節點是否健康。
2. 實現LVS本身的高可用。

2.1 配置環境

角色 主機IP 主機名 操作系統版本 軟件版本

VIP 192.162.3.200

LVS-DR-Master 192.162.3.41 keepalived01 CentOS6.9 Keepalived v1.2.13，LVS 1.2.1

LVS-DR-Backup 192.162.3.42 keepalived02 CentOS6.9 Keepalived v1.2.13，LVS 1.2.1

mycat-Realserver 192.162.3.34 mycat01 CentOS6.9 mycat v1.6.5

mycat-Realserver 192.162.3.35 mycat02 CentOS6.9 mycat v1.6.5

mycat-Realserver 192.162.3.36 mycat03 CentOS6.9 mycat v1.6.5

2.2安裝keepalived和ipvsadm

  注意：ipvsadm并不是lvs，它只是lvs的配置工具，因lvs在3.10（CentOS1.1的內核版本）的內核中是默認支持的。所以在這里就不需要重新安裝。

  為了方便起見，在這里我們使用yum的安裝方式

  分別在keepalived01和keepalived02兩臺主機上安裝keepalived和ipvsadm

  yum install -y keepalived ipvsadm

  除了這種簡易方式外，也可直接編譯官方的源碼包。

  LVS：<http://www.linuxvirtualserver.org/software/index.html>

  Keepalived：<http://www.keepalived.org/download.html>

  安裝步驟可參考：<http://www.cnblogs.com/mchina/archive/2012/05/23/2514122.html>

2.3 配置Keepalived

2.3.1 master

vi /etc/keepalived/keepalived.conf

! Configuration File for keepalived

global_defs {
   notification_email {
     acassen@firewall.loc     #設置報警郵件地址，可以設置多個，每行一個。
     failover@firewall.loc    #需開啟本機的sendmail服務
     sysadmin@firewall.loc
   }
   notification_email_from Alexandre.Cassen@firewall.loc  #設置郵件的發送地址
   smtp_server 121.0.0.1      #設置smtp server地址
   smtp_connect_timeout 30    #設置連接smtp server的超時時間
   router_id LVS_DEVEL        #表示運行keepalived服務器的一個標識。發郵件時顯示在郵件主題的信息
}

vrrp_instance VI_1 {
    state MASTER              #指定keepalived的角色，MASTER表示此主機是主服務器，BACKUP表示此主機是備用服務器
    interface eth5     #指定HA監測網絡的接口,通過 ifconfig 或者 ip add 查看到的網絡接口名字
    virtual_router_id 51      #虛擬路由標識，這個標識是一個數字，同一個vrrp實例使用唯一的標識。即同一vrrp_instance下，MASTER和BACKUP必須是一致的
    priority 100              #定義優先級，數字越大，優先級越高，在同一個vrrp_instance下，MASTER的優先級必須大于BACKUP的優先級
    advert_int 1              #設定MASTER與BACKUP負載均衡器之間同步檢查的時間間隔，單位是秒
    authentication {          #設置驗證類型和密碼
        auth_type PASS        #設置驗證類型，主要有PASS和AH兩種
        auth_pass 1111        #設置驗證密碼，在同一個vrrp_instance下，MASTER與BACKUP必須使用相同的密碼才能正常通信
    }
    virtual_ipaddress {       #設置虛擬IP地址，可以設置多個虛擬IP地址，每行一個
         192.162.3.200
    }
}

virtual_server  192.162.3.200 2066 {  #設置虛擬服務器，需要指定虛擬IP地址和服務端口，IP與端口之間用空格隔開
    delay_loop 6              #設置運行情況檢查時間，單位是秒
    lb_algo rr                #設置負載調度算法，這里設置為rr，即輪詢算法
    lb_kind DR                #設置LVS實現負載均衡的機制，有NAT、TUN、DR三個模式可選
    nat_mask 255.255.255.0
    persistence_timeout 50    #會話保持時間，單位是秒。這個選項對動態網頁是非常有用的，為集群系統中的session共享提供了一個很好的解決方案。如果設置為0會執行輪詢方式實現負載均衡,設置數字則代表在指定實現內使用 iphash 方式
                              #有了這個會話保持功能，用戶的請求會被一直分發到某個服務節點，直到超過這個會話的保持時間。
                              #需要注意的是，這個會話保持時間是最大無響應超時時間，也就是說，用戶在操作動態頁面時，如果50秒內沒有執行任何操作
                              #那么接下來的操作會被分發到另外的節點，但是如果用戶一直在操作動態頁面，則不受50秒的時間限制
    protocol TCP              #指定轉發協議類型，有TCP和UDP兩種

    real_server 192.162.3.34 2066 { #配置服務節點1，需要指定real server的真實IP地址和端口，IP與端口之間用空格隔開
        weight 1              #配置服務節點的權值，權值大小用數字表示，數字越大，權值越高，設置權值大小可以為不同性能的服務器
                              #分配不同的負載，可以為性能高的服務器設置較高的權值，而為性能較低的服務器設置相對較低的權值，這樣才能合理地利用和分配系統資源
        TCP_CHECK {           #realserver的狀態檢測設置部分，單位是秒
            connect_timeout 3    #表示3秒無響應超時
            nb_get_retry 3       #表示重試次數
            delay_before_retry 3 #表示重試間隔
            connect_port 2066
        }
    }
    real_server 192.162.3.35 2066 {
        weight 1
        TCP_CHECK {
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
            connect_port 2066
        }
    }

 real_server 192.162.3.36 2066 {
        weight 1
        TCP_CHECK {
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
            connect_port 2066
        }
    }
}

2.3.2 backup

修改備份機上面同樣的文件,除了優先級和狀態修改外,其他與主機一致

! Configuration File for keepalived

global_defs {
   notification_email {
     acassen@firewall.loc
     failover@firewall.loc
     sysadmin@firewall.loc
   }
   notification_email_from Alexandre.Cassen@firewall.loc
   smtp_server 121.0.0.1
   smtp_connect_timeout 30
   router_id LVS_DEVEL
}

vrrp_instance VI_1 {
    state BACKUP   #將state從MASTER改為BACKUP
    interface eth5
    virtual_router_id 51
    priority 99  #修改優先級
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
         192.162.3.200
    }
}

virtual_server  192.162.3.200 2066 {
    delay_loop 6
    lb_algo rr
    lb_kind DR
    nat_mask 255.255.255.0
    persistence_timeout 50
    protocol TCP

    real_server 192.162.3.34 2066 {
        weight 1
        TCP_CHECK {
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
            connect_port 2066
        }
    }
    real_server 192.162.3.35 2066 {
        weight 1
        TCP_CHECK {
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
            connect_port 2066
        }
    }
    real_server 192.162.3.36 2066 {
        weight 1
        TCP_CHECK {
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
            connect_port 2066
        }
    }
}

在上面這兩個配置文件中，有一個地方尤其需要注意，即interface，網上的相關部署文檔都是eth0，在CentOS1之前，網絡接口的確都是eth0，但在CentOS1中，該接口為eno16111136。所以需要根據生產實際情況進行相應的修改

2.4 安裝配置 mycat

安裝請參考上面

2.4.1 綁定虛擬 vip

在MyCAT服務器上為lo:0綁定VIP地址、抑制ARP廣播

分別在mycat01和mycat02,mycat03三臺主機上執行以下腳本,此處起名realserver.sh ,自行創建復制以下內容

如果出現找不到文件或者目錄的錯誤,先執行 yum -y install net-tools

#!/bin/bash
#description: Config realserver
#此處 ip 與前面配置的虛擬 ip 一致
VIP=192.162.3.200
 
/etc/rc.d/init.d/functions
 
case "$1" in
start)
       /sbin/ifconfig lo:0 $VIP netmask 255.255.255.255 broadcast $VIP
       /sbin/route add -host $VIP dev lo:0
       echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
       echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
       echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
       echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce
       sysctl -p >/dev/null 2>&1
       echo "RealServer Start OK"
       ;;
stop)
       /sbin/ifconfig lo:0 down
       /sbin/route del $VIP >/dev/null 2>&1
       echo "0" >/proc/sys/net/ipv4/conf/lo/arp_ignore
       echo "0" >/proc/sys/net/ipv4/conf/lo/arp_announce
       echo "0" >/proc/sys/net/ipv4/conf/all/arp_ignore
       echo "0" >/proc/sys/net/ipv4/conf/all/arp_announce
       echo "RealServer Stoped"
       ;;
*)
       echo "Usage: $0 {start|stop}"
       exit 1
esac
 
exit 0

分別在機器上執行./realserver.sh start

2.4.2 查看

運行 ifconfig 查看

2.5 啟動 keeplive

分別在keepalived01和keepalived02上啟動Keepalived服務

service keepalived start

2.5.1 查看

通過ipvsadm -L 查看映射,出現類似一下結果,理論上成功

[root@192 ~]# ipvsadm -L                       
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.162.3.200:2066 rr persistent 50
  -> 192.162.3.34:2066            Route   1      0          0        
  -> 192.162.3.35:2066            Route   1      0          0        
  -> 192.162.3.36:2066            Route   1      0          0 

2.5.2 測試

通過一臺裝有 mysql的機器連接我們的虛擬 ip 發現可以登錄數據庫

[root@192 network-scripts]# mysql -uroot -pdigdeep -P2066 -h292.162.3.200
mysql: [Warning] Using a password on the command line interface can be insecure.
Welcome to the MySQL monitor.  Commands end with ; or \g.
Your MySQL connection id is 301
Server version: 5.6.29-mycat-1.6.5-release-20120122220033 MyCat Server (OpenCloundDB)

Copyright (c) 2000, 2016, Oracle and/or its affiliates. All rights reserved.

Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

mysql>

2.5.3 查看轉發

再次在 keepalived 的機器執行ipvsadm -L,發現被轉到35上面一次

[root@192 ~]# ipvsadm -L
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.162.3.200:2066 rr persistent 50
  -> 192.162.3.34:2066            Route   1      0          0        
  -> 192.162.3.35:2066            Route   1      0          1        
  -> 192.162.3.36:2066            Route   1      0          0        
[root@192 ~]#

2.5.4 負載均衡方式

與配置相關,此處發現多次都指向一個機器,因為我們在 keepalived 的配置文件中persistence_timeout屬性指定為50 則代表50秒內同一個機器來的請求會被 hash 一致性分配,如果想實現嚴格意義上面的輪詢,修改為0即可

[root@192 ~]# ipvsadm -L
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.162.3.200:2066 rr persistent 50
  -> 192.162.3.34:2066            Route   1      0          0        
  -> 192.162.3.35:2066            Route   1      1          3        
  -> 192.162.3.36:2066            Route   1      0          0        
[root@192 ~]#

關于“mycat如何實現高可用”這篇文章就分享到這里了，希望以上內容可以對大家有一定的幫助，使各位可以學到更多知識，如果覺得文章不錯，請把它分享出去讓更多的人看到。