MySQL讀寫分離基本原理是讓master資料庫處理寫操作,slave資料庫處理讀操作。master將寫操作的變更同步到各個slave節點。
MySQL讀寫分離能提高系統效能的原因在於:
- 物理伺服器增加,機器處理能力提升。拿硬體換效能。
- 主從只負責各自的讀和寫,極大程度緩解X鎖和S鎖爭用。
- slave可以配置myiasm引擎,提升查詢效能以及節約系統開銷。
- master直接寫是併發的,slave通過主庫傳送來的binlog恢復資料是非同步。
- slave可以單獨設定一些引數來提升其讀的效能。
- 增加冗餘,提高可用性。
MySQLProxy介紹
下面使用MySQL官方提供的資料庫代理層產品MySQLProxy搭建讀寫分離。
MySQLProxy實際上是在客戶端請求與MySQLServer之間建立了一個連線池。所有客戶端請求都是發向MySQLProxy,然後經由MySQLProxy進行相應的分析,判斷出是讀操作還是寫操作,分發至對應的MySQLServer上。對於多節點Slave叢集,也可以起做到負載均衡的效果。
MySQL讀寫分離配置
MySQL環境準備
master 192.168.1.5
slave 192.168.1.6
proxy 192.168.1.2
MySQL:5.5.37
MySQL-proxy:mysql-proxy-0.8.4-linux-rhel5-x86-64bit.tar.gz
建立使用者並分配許可權
1 2 |
mysql> create user libai identified by 'libai'; mysql> grant all on *.* to libai@'192.168.1.%' identified by 'lib; |
在配置了MySQL複製,以上操作在master執行會同步到slave節點。
啟用MySQL複製
MySQL複製配置請參考這裡
先關閉並清除之前的複製。
1 2 |
mysql> stop slave; mysql> reset slave all; |
啟用新的複製同步。啟用之前需要清除日誌
1 |
mysql> change master to master_host='192.168.1.5',master_user='libai',master_password='libai',master_port=3306,master_log_file='mysql-bin.000001',master_log_pos=0; |
主庫
1 2 3 4 5 |
# mysql -h localhost -ulibai -plibai mysql> create database d; mysql> use d; mysql> create table t(i int); mysql> insert into t values(1); |
從庫
1 2 3 4 5 |
mysql> select * from t; +------+ | i | +------+ | 1 | |
啟用MySQLProxy代理伺服器
代理伺服器上建立mysql使用者
1 2 |
# groupadd mysql # useradd -g mysql mysql |
解壓啟動mysql-proxy
1 |
# ./mysql-proxy --daemon --log-level=debug --user=mysql --keepalive --log-file=/var/log/mysql-proxy.log --plugins="proxy" --proxy-backend-addresses="192.168.1.5:3306" --proxy-read-only-backend-addresses="192.168.1.6:3306" --proxy-lua-script="/root/soft/mysql-proxy/rw-splitting.lua" --plugins=admin --admin-username="admin" --admin-password="admin" --admin-lua-script="/root/soft/mysql-proxy/lib/mysql-proxy/lua/admin.lua" |
其中proxy-backend-addresses是master伺服器,proxy-read-only-backend-addresses是slave伺服器。可以通過./mysql-proxy –help 檢視詳細說明。
檢視啟動後程式
1 2 3 |
# ps -ef | grep mysql root 25721 1 0 11:33 ? 00:00:00 /root/soft/mysql-proxy/libexec/mysql-proxy --daemon --log-level=debug --user=mysql --keepalive --log-file=/var/log/mysql-proxy.log --plugins=proxy --proxy-backend-addresses=192.168.1.5:3306 --proxy-read-only-backend-addresses=192.168.1.6:3306 --proxy-lua-script=/root/soft/mysql-proxy/rw-splitting.lua --plugins=admin --admin-username=admin --admin-password=admin --admin-lua-script=/root/soft/mysql-proxy/lib/mysql-proxy/lua/admin.lua mysql 25722 25721 0 11:33 ? 00:00:00 /root/soft/mysql-proxy/libexec/mysql-proxy --daemon --log-level=debug --user=mysql --keepalive --log-file=/var/log/mysql-proxy.log --plugins=proxy --proxy-backend-addresses=192.168.1.5:3306 --proxy-read-only-backend-addresses=192.168.1.6:3306 --proxy-lua-script=/root/soft/mysql-proxy/rw-splitting.lua --plugins=admin --admin-username=admin --admin-password=admin --admin-lua-script=/root/soft/mysql-proxy/lib/mysql-proxy/lua/admin.lua |
4040是proxy埠,4041是admin管理埠
1 2 3 4 5 |
COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME mysql-pro 25722 mysql 10u IPv4 762429 0t0 TCP *:yo-main (LISTEN) # lsof -i:4041 COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME mysql-pro 25722 mysql 11u IPv4 762432 0t0 TCP *:houston (LISTEN) |
測試
保證mysqlproxy節點上可執行mysql 。通過複製同步帳號連線proxy
1 2 3 4 5 6 7 8 9 10 11 |
# mysql -h 192.168.1.2 -ulibai -p --port=4040 mysql> show databases +--------------------+ | Database | +--------------------+ | information_schema | | d | | mysql | | performance_schema | | test | +--------------------+ |
登入admin檢視狀態
1 2 3 4 5 6 7 8 |
# mysql -h 192.168.1.2 -u admin -p --port=4041 mysql> select * from backends; +-------------+------------------+-------+------+------+-------------------+ | backend_ndx | address | state | type | uuid | connected_clients | +-------------+------------------+-------+------+------+-------------------+ | 1 | 192.168.1.5:3306 | up | rw | NULL | 0 | | 2 | 192.168.1.6:3306 | up | ro | NULL | 0 | +-------------+------------------+-------+------+------+-------------------+ |
2 rows in set (0.00 sec)
可以從以上查詢中看到master和slave狀態均為up。
1)登入proxy節點,建立資料庫dufu,並建立一張表t
1 2 3 4 5 |
mysql> create database dufu; mysql> show databases; mysql> use dufu; mysql> create table t(id int(10),name varchar(20)); mysql> show tables; |
建立完資料庫及表後,主從節點上應該都可以看到
2)關閉同步,分別在master和slave上插入資料
1 |
mysql> slave stop; |
master
1 |
mysql> insert into t values(1,'this_is_master'); |
slave
1 |
mysql> insert into t values(2,'this_is_slave'); |
3)proxy上檢視結果
1 2 3 4 5 6 7 8 |
mysql> use dufu; mysql> select * from t; +------+---------------+ | id | name | +------+---------------+ | 2 | this_is_slave | +------+---------------+ 1 row in set (0.00 sec) |
從結果可以看到資料是從slave上讀取的,並沒考慮master節點上的資料。
直接從proxy上插入資料
1 |
mysql> insert into t values(3,'this_is_proxy'); |
再次查詢
1 2 3 4 5 6 |
mysql> select * from t; +------+---------------+ | id | name | +------+---------------+ | 2 | this_is_slave | +------+---------------+ |
結果顯示查詢資料沒有變化,因為proxy上執行insert相當於寫入到了master上,而查詢的資料是從slave上讀取的。
master上查詢
1 2 3 4 5 6 7 |
mysql> select * from t; +------+----------------+ | id | name | +------+----------------+ | 1 | this_is_master| | 3 | this_is_proxy | +------+----------------+ |
啟用複製,proxy查詢
1 2 3 4 5 6 7 8 |
mysql> select * from t; +------+----------------+ | id | name | +------+----------------+ | 2 | this_is_slave | | 1 | this_is_master | | 3 | this_is_proxy | +------+----------------+ |
說明此時master上的資料同步到了slave,並且在proxy查詢到資料是slave資料庫的資料。此時,可以看到MySQLProxy實現了分離。