MySQL中介軟體之ProxySQL(14)：ProxySQL+PXC

駿馬金龍發表於2018-07-26
MySql

返回ProxySQL系列文章：http://www.cnblogs.com/f-ck-need-u/p/7586194.html

 

1.ProxySQL+PXC

本文演示ProxySQL代理PXC(Percona XtraDB Cluster)的方法，不涉及原理，純配置過程，所以如有不懂之處，請先掌握相關理論。

ProxySQL要代理PXC，需要使用ProxySQL額外提供的指令碼/usr/share/proxysql/tools/proxysql_galera_checker.sh做健康檢查並動態調整，通過Scheduler來呼叫實現。ProxySQL v2.0版本將原生支援Galera並增加相關表mysql_galera_hostgroups，到時就無需借用第三方指令碼。

實驗環境：

Node HostName IP_address
Node1 proxysql 192.168.100.21
Node2 pxc1 192.168.100.32
Node3 pxc2 192.168.100.33
Node4 pxc3 192.168.100.34

1.1 配置PXC

1.安裝percona xtradb cluster

3個節點上(pxc1、pxc2、pxc3)都操作：

提供yum源：

[percona]
name=percona_repo
baseurl = https://mirrors.tuna.tsinghua.edu.cn/percona/release/$releasever/RPMS/$basearch
enabled = 1
gpgcheck = 0

安裝

yum install Percona-XtraDB-Cluster-client-57

2.提供配置檔案

第一個節點(pxc1)配置檔案/etc/my.cnf：

[mysqld]
server-id=100               # 各節點不同
datadir=/data
socket=/data/mysql.sock
log-error=/data/error.log
pid-file=/data/mysqld.pid
log-bin=/data/master-bin
log_slave_updates

wsrep_provider=/usr/lib64/galera3/libgalera_smm.so
wsrep_cluster_name=pxc-cluster
wsrep_cluster_address=gcomm://192.168.100.32,192.168.100.33,192.168.100.34
wsrep_node_name=pxc1                # 各節點不同
wsrep_node_address=192.168.100.32   # 各節點不同
wsrep_sst_method=xtrabackup-v2
wsrep_sst_auth=sstuser:P@ssword1!
pxc_strict_mode=ENFORCING
binlog_format=ROW
default_storage_engine=InnoDB
innodb_autoinc_lock_mode=2

第二個節點(pxc2)配置檔案

[mysqld]
server-id=110               # 各節點不同
datadir=/data
socket=/data/mysql.sock
log-error=/data/error.log
pid-file=/data/mysqld.pid
log-bin=/data/master-bin
log_slave_updates

wsrep_provider=/usr/lib64/galera3/libgalera_smm.so
wsrep_cluster_name=pxc-cluster
wsrep_cluster_address=gcomm://192.168.100.32,192.168.100.33,192.168.100.34
wsrep_node_name=pxc2                # 各節點不同
wsrep_node_address=192.168.100.33   # 各節點不同
wsrep_sst_method=xtrabackup-v2
wsrep_sst_auth=sstuser:P@ssword1!
pxc_strict_mode=ENFORCING
binlog_format=ROW
default_storage_engine=InnoDB
innodb_autoinc_lock_mode=2

第三個節點(pxc3)配置檔案

[mysqld]
server-id=120               # 各節點不同
datadir=/data
socket=/data/mysql.sock
log-error=/data/error.log
pid-file=/data/mysqld.pid
log-bin=/data/master-bin
log_slave_updates

wsrep_provider=/usr/lib64/galera3/libgalera_smm.so
wsrep_cluster_name=pxc-cluster
wsrep_cluster_address=gcomm://192.168.100.32,192.168.100.33,192.168.100.34
wsrep_node_name=pxc3                # 各節點不同
wsrep_node_address=192.168.100.34   # 各節點不同
wsrep_sst_method=xtrabackup-v2
wsrep_sst_auth=sstuser:P@ssword1!
pxc_strict_mode=ENFORCING
binlog_format=ROW
default_storage_engine=InnoDB
innodb_autoinc_lock_mode=2

3.引導PXC叢集

在第一個MySQL節點上(pxc1)以bootstrap形式啟動MySQL：

/etc/init.d/mysql bootstrap-pxc
# 或
systemctl start mysql@bootstrap.service

檢視引導狀態：

mysql@pxc1> show status like `wsrep%`;
+----------------------------+--------------------------------------+
| Variable_name              | Value                                |
+----------------------------+--------------------------------------+
| wsrep_local_state_uuid     | c2883338-834d-11e2-0800-03c9c68e41ec |
| ...                        | ...                                  |
| wsrep_local_state          | 4                                    |
| wsrep_local_state_comment  | Synced                               |
| ...                        | ...                                  |
| wsrep_cluster_size         | 1                                    |
| wsrep_cluster_status       | Primary                              |
| wsrep_connected            | ON                                   |
| ...                        | ...                                  |
| wsrep_ready                | ON                                   |
+----------------------------+--------------------------------------+

正確引導了第一個節點後，在第一個節點上建立SST的認證使用者，注意這個使用者名稱和密碼需要和前面配置檔案指定的一致。

create user `sstuser`@localhost identified by `P@ssword1!`;
grant reload,lock tables,process,replication client on *.* to `sstuser`@localhost;
flush privileges;

4.加入第二、第三個節點

直接啟動mysqld服務即可。

在第二、三個節點(pxc2、pxc3)上執行：

/etc/init.d/mysql start
#### 或
systemctl start mysql

1.2 配置ProxySQL

以下過程均在proxysql節點(Node1)上操作，除非已顯式指明。

1.安裝ProxySQL和MySQL客戶端

提供ProxySQL的yum源：

cat <<EOF | tee /etc/yum.repos.d/proxysql.repo
[proxysql_repo]
name= ProxySQL
baseurl=http://repo.proxysql.com/ProxySQL/proxysql-1.4.x/centos/$releasever
gpgcheck=0
enabled=1

[percona]
name=percona_repo
baseurl = https://mirrors.tuna.tsinghua.edu.cn/percona/release/$releasever/RPMS/$basearch
enabled = 1
gpgcheck = 0
EOF

然後安裝。這裡的Percona-XtraDB-Cluster-57只是為了提供mysql客戶端，也可以裝其他的，例如官方的mysql。

yum -y install proxysql Percona-XtraDB-Cluster-57

啟動ProxySQL，並用mysql客戶端連線ProxySQL的管理介面：

service proxysql start
mysql -uadmin -padmin -h127.0.0.1 -P6032 --prompt `admin> `

2.新增pxc到ProxySQL的 mysql_servers 表

insert into mysql_servers(hostgroup_id,hostname,port) values
(10,`192.168.100.32`,3306),
(10,`192.168.100.33`,3306),
(10,`192.168.100.34`,3306);

load mysql servers to runtime;
save mysql servers to disk;

3.建立監控使用者，並設定監控使用者憑據

在pxc上執行(pxc1、pxc2、pxc3任意一個)建立監控使用者，如果不監控replication lag，只需usage許可權即可，如果監控replication lag，則需要replication client許可權。這裡直接授予replication client許可權。

create user monitor@`192.168.100.%` identified by `P@ssword1!`;
grant replication client on *.* to monitor@`192.168.100.%`;

回到ProxySQL節點上配置監控使用者憑據。

set mysql-monitor_username=`monitor`;
set mysql-monitor_password=`P@ssword1!`;

load mysql variables to runtime;
save mysql variables to disk;

注意，不要監控PXC的read_only，也不要配置mysql_replication_hostgroup。因為目前版本的ProxySQL不支援指定Galera叢集中哪些節點作為讀，哪些節點作為寫節點。在未來的ProxySQL 2.0版本，將會新增mysql_galera_hostgroups表，可以指定叢集中的讀寫節點，讓ProxySQL對Galera的支援更豐富、具體，該表的意義和作用，見mysql_galera_hostgroups 。

所以，目前版本的ProxySQL+PXC，無法將讀、寫操作分離到同一個組中的不同節點上。但是可以保證同一個事務內的語句全都路由到同一個組中的同一個節點(ProxySQL在某些情況下會自動禁用multiplexing功能)。

4.設定ProxySQL連線後端PXC的使用者，即配置 mysql_users 表

在pxc上執行(pxc1、pxc2、pxc3任意一個)建立連線使用者，這裡假設ProxySQL全都使用root使用者連線PXC，以及接受app的SQL請求。

create user root@`192.168.100.%` identified by `P@ssword1!`
grant all on *.* to root@`192.168.100.%`;

然後回到ProxySQL，配置mysql_users表，將剛才的使用者新增到該表中。

insert into mysql_users(username,password,default_hostgroup,transaction_persistent) 
values(`root`,`P@ssword1!`,10,1);
load mysql users to runtime;
save mysql users to disk;

5.新增Galera支援

ProxySQL不原生支援Galera特性，只是把它當作普通的MySQL，要保證Galera的合理執行，只能通過任務排程模組(scheduler)來排程外部指令碼做Galera的健康檢查，並根據檢查結果動態修改ProxySQL的配置。

ProxySQL自身已帶Galera叢集的健康檢查指令碼，路徑為/usr/share/proxysql/tools/proxysql_galera_checker.sh。可以自己開啟這個shell指令碼看看，並不複雜。注意這個指令碼，能自動配置ProxySQL標記某個MySQL節點offline_soft，並將重新上線的節點加回ProxySQL中。

再ProxySQL中建立一個scheduler，用於呼叫這個指令碼：

INSERT INTO scheduler(id,interval_ms,filename,arg1,arg2,arg3,arg4) VALUES
(1,`10000`,`/var/lib/proxysql/proxysql_galera_checker.sh`,`127.0.0.1`,`6032`,`10`,
`/tmp/proxysql_galera_checker.log`);

LOAD SCHEDULER TO RUNTIME;
SAVE SCHEDULER TO DISK;

id：排程任務的id
interval_ms：執行指令碼的時間間隔，也就是檢查Galera叢集的時間間隔，單位毫秒
filename：該排程任務所要排程的檔名
arg1：指定ProxySQL的admin管理介面監聽地址
arg2：admin管理介面埠
arg3：指定待檢查的組hostgroup_id，指令碼會從檢查這個組中所有節點的”wsrep_local_state”值，並根據值來自動重新配置ProxySQL
arg4：指定指令碼執行過程中產生的資料儲存路徑。預設值為/dev/null

需要注意，上述是ProxySQL官方提供的指令碼，percona提供的ProxySQL的Galera檢查指令碼和ProxySQL官方提供的不一樣，具體用法以及引數可開啟指令碼檢視。

對於scheduler模組來說，scheduler表最多允許接受5個引數位。

6.測試

上述配置完成後，可以進行讀、寫測試，並測試是否會按預期移除、加回故障節點。

相關文章