搭建MySQL主從實現Django讀寫分離

Yang`發表於2021-07-30
MySqlDjango

一、MySQL主從搭建

主從配置原理：

  1. 主庫寫日誌到 BinLog
  2. 從庫開個 IO 執行緒讀取主庫的 BinLog 日誌，並寫入 RelayLog
  3. 再開一個 SQL 執行緒，讀 RelayLog 日誌，回放到從庫中

主從配置流程：

  1. master 會將變動記錄到二進位制日誌裡面；
  2. master 有一個 I/O 執行緒將二進位制日誌傳送到 slave；
  3. salve 有一個 I/O 執行緒把 master 傳送的二進位制寫入到 relay 日誌裡面；
  4. slave 有一個 SQL 執行緒，按照 relay 日誌處理 slave 的資料；

操作步驟

使用 docker 模擬兩臺 MySQL 資料庫機器

1、修改配置檔案：

主庫的配置檔案

[mysqld]
user=mysql
character-set-server=utf8
default_authentication_plugin=mysql_native_password
secure_file_priv=/var/lib/mysql
expire_logs_days=7
sql_mode=STRICT_TRANS_TABLES,NO_ZERO_IN_DATE,NO_ZERO_DATE,ERROR_FOR_DIVISION_BY_ZERO,NO_ENGINE_SUBSTITUTION
max_connections=1000

server-id=100  		# 主庫，同一區域網內注意要唯一
log-bin=mysql-bin	# 開啟二進位制日誌功能，可以隨便取名字（二進位制檔名）

[client]
default-character-set=utf8
[mysql]
default-character-set=utf8

從庫的配置檔案

[mysqld]
user=mysql
character-set-server=utf8
default_authentication_plugin=mysql_native_password
secure_file_priv=/var/lib/mysql
expire_logs_days=7
sql_mode=STRICT_TRANS_TABLES,NO_ZERO_IN_DATE,NO_ZERO_DATE,ERROR_FOR_DIVISION_BY_ZERO,NO_ENGINE_SUBSTITUTION
max_connections=1000

server-id=101 					# 從庫設定server_id,注意要唯一
log-bin=mysql-slave-bin			# 開啟二進位制日誌功能，定義名字，以備Slave作為其它Slave的Master時使用
relay_log=edu-mysql-relay-bin	# relay_log配置中繼日誌

[client]
default-character-set=utf8
[mysql]
default-character-set=utf8

啟動docker

#啟動主庫容器（掛載外部目錄，埠對映成33307，密碼設定為123456）
docker run  -di -v /home/mysql/data/:/var/lib/mysql -v /home/mysql/conf.d:/etc/mysql/conf.d -v /home/mysql/my.cnf:/etc/mysql/my.cnf -p 33307:3306 --name mysql-master -e MYSQL_ROOT_PASSWORD=123456 mysql:5.7
                    
#啟動從庫容器（掛載外部目錄，埠對映成33306，密碼設定為123456）
docker run  -di -v /home/mysql2/data/:/var/lib/mysql -v /home/mysql2/conf.d:/etc/mysql/conf.d -v /home/mysql2/my.cnf:/etc/mysql/my.cnf -p 33306:3306 --name mysql-slave -e MYSQL_ROOT_PASSWORD=123456 mysql:5.7

2、由於主庫和從庫都需要對日誌檔案進行操作，這就需要另一個使用者來操作，所以主從都需要建立一個使用者

# 連線庫
mysql -h 192.168.88.131 -P 33307 -u root -p123456

# 在主庫建立使用者並授權
# 建立test使用者
create user 'test' identified by '123';
# 授權使用者
grant all privileges on *.* to 'test' ;
# 重新整理許可權
flush privileges;

3、連線從庫配置

# 連線從庫
mysql -h 192.168.88.131 -P 33306 -u root -p123456

# 命令如下
change master to master_host='192.168.88.131',master_port=33307,master_user='test',master_password='123',master_log_file='mysql-bin.000003',master_log_pos=0;

# 啟用從庫
start slave;
# 停止從庫
stop slave;
# 檢視從庫狀態
show slave status\G;
# 這兩個yes表示匹配成功
    -Slave_IO_Running: Yes
    -Slave_SQL_Running: Yes


# 配置詳解
change master to 
master_host='MySQL主伺服器IP地址', 
master_user='之前在MySQL主伺服器上面建立的使用者名稱'， 
master_password='之前建立的密碼', 
master_log_file='MySQL主伺服器狀態中的二進位制檔名', 		# show master status; 檢視
master_log_pos='MySQL主伺服器狀態中的position值';		# show master status; 檢視

二、Django實現讀寫分離

首先主從搭建好了後：

在 setting 中配置

DATABASES = {
    # 主庫
    'default': {
        'ENGINE': 'django.db.backends.mysql',
        'NAME': 'test',
        'USER': 'root',
        'PASSWORD': '123456',
        'HOST': '192.168.88.131',
        'PORT': 33307,
    },
    # 從庫
    'slave': {
        'ENGINE': 'django.db.backends.mysql',
        'NAME': 'test',
        'USER': 'root',
        'PASSWORD': '123456',
        'HOST': '192.168.88.131',
        'PORT': 33306,
    },
}

在資料庫遷移的時候，可以指定把那個app的表結構遷移到那個庫

python manage.py migrate app01 --database=default

手動指定

# 去default庫寫——>主庫
content = models.User.objects.using('default').create(name='小楊', age='20')

# 去slave庫查——>從庫
content = models.User.objects.using('slave').all().first()

自動指定

1、新建一個py檔案

db_router.py

class Router:
    def db_for_read(self, model, **hints):
        return 'slave'

    def db_for_write(self, mode, **hints):
        return 'default'
    
    
# 更細粒度
class Router1:
    def db_for_read(self, model, **hints):
        if model._meta.model_name == 'user':	# 只有User表才會去從庫讀
            return 'slave'
        else:
            return 'default'

    def db_for_write(self, model, **hints):
        return 'default'

2、在 setting 中註冊

DATABASE_ROUTERS = ['db_router.Router',]
# 以後只要是寫操作就會用default，只要是讀操作自動去slave

相關文章