# 檢視 GreatDB 版本資訊

檢視客戶端版本資訊
```powershell
[root@greatdb1 ~]# greatsqld --version
/greatdb/svr/greatdb-cluster-5.0.7-fbb08fbed60-Linux-glibc2.17-x86_64/bin/greatsqld  Ver 8.0.25-15-greatdbcluster5.0.7-GA for Linux on x86_64 (GreatDB Cluster, Release GA, Revision fbb08fbed60)
[root@greatdb1 ~]# greatdbd --version
/greatdb/svr/greatdb-cluster-5.0.7-fbb08fbed60-Linux-glibc2.17-x86_64/bin/greatsqld  Ver 8.0.25-15-greatdbcluster5.0.7-GA for Linux on x86_64 (GreatDB Cluster, Release GA, Revision fbb08fbed60)
```

檢視當前叢集版本號資訊

```powershell
[root@greatdb1 ~]# greatsql -ugreatdb -pgreatdb -h192.168.0.81 -P3306

GreatDB Cluster[(none)]> select version();
+----------------------------------+
| version()                        |
+----------------------------------+
| 8.0.25-15-greatdbcluster5.0.7-GA |
+----------------------------------+
1 row in set (0.00 sec)
```

通過全域性變數檢視版本

```powershell
[root@greatdb1 ~]# greatsql -ugreatdb -pgreatdb -h192.168.0.81 -P3306

檢視版本的詳細資訊

```powershell
[root@greatdb1 ~]# greatsql -ugreatdb -pgreatdb -h192.168.0.81 -P3306

GreatDB Cluster[(none)]> \s
--------------
greatsql  Ver 8.0.25-15-greatdbcluster5.0.7-GA for Linux on x86_64 (GreatDB Cluster, Release GA, Revision fbb08fbed60)

Connection id:          389
Current database:
Current user:           greatdb@192.168.0.81
SSL:                    Cipher in use is ECDHE-RSA-AES128-GCM-SHA256
Current pager:          stdout
Using outfile:          ''
Using delimiter:        ;
Server version:         8.0.25-15-greatdbcluster5.0.7-GA GreatDB Cluster, Release GA, Revision fbb08fbed60
Protocol version:       10
Connection:             192.168.0.81 via TCP/IP
Server characterset:    utf8mb4
Db     characterset:    utf8mb4
Client characterset:    utf8mb4
Conn.  characterset:    utf8mb4
TCP port:               3306
Binary data as:         Hexadecimal
Uptime:                 29 min 43 sec

Threads: 14  Questions: 1562  Slow queries: 3  Opens: 406  Flush tables: 4  Open tables: 192  Queries per second avg: 0.876
--------------

GreatDB Cluster[(none)]>
```

GreatDB 叢集節點啟停方式
SqlNode 關閉方式
命令方式

```powershell
[root@greatdb1 ~]# greatsqladmin -ugreatdb -pgreatdb -h192.168.0.81 -P3306 shutdown
或
[root@greatdb1 ~]# greatsql -ugreatdb -pgreatdb -h192.168.0.81 -P3306
GreatDB Cluster[(none)]> shutdown;
或
GreatDB Cluster[(none)]> CALL mysql.greatdb_stop_sqlnode_server('192.168.0.83', 3306);
Query OK, 1 row affected (0.04 sec)
```

指令碼方式，推薦使用

```powershell
[root@greatdb1 ~]# cat /greatdb/sh/sqlnode3306.sh
#!/bin/sh

MYSQL_BASE=/greatdb/svr/greatdb
MYSQL_CONF=/greatdb/conf/sqlnode3306.cnf
MYSQL_SOCKET=/greatdb/dbdata/sqlnode3306/data/greatdb.sock

export PATH=$MYSQL_BASE/bin:/usr/sbin:/usr/bin:/sbin:/bin
export LD_LIBRARY_PATH=$MYSQL_BASE/lib

if [ "$1" = "stop" ] ; then
    $MYSQL_BASE/bin/greatsqladmin --defaults-file=$MYSQL_CONF -uroot -p --socket=$MYSQL_SOCKET shutdown
elif [ "$1" = "restart" ]; then
    $MYSQL_BASE/bin/greatsqladmin --defaults-file=$MYSQL_CONF -uroot -p --socket=$MYSQL_SOCKET shutdown
    $MYSQL_BASE/bin/greatsqld_safe --defaults-file=$MYSQL_CONF &
elif [ "$1" = "start" ]; then
    $MYSQL_BASE/bin/greatsqld_safe --defaults-file=$MYSQL_CONF &
else
    echo "usage: $0 start|stop|restart"
fi
```

```powershell
[root@greatdb1 ~]# /greatdb/sh/sqlnode3306.sh
usage: /greatdb/sh/sqlnode3306.sh start|stop|restart
[root@greatdb1 ~]# /greatdb/sh/sqlnode3306.sh stop
Enter password:
```
![image.png](https://img-blog.csdnimg.cn/e2db027eec4849ab9dfb2d50df29dc44.png)

## SqlNode 啟動方式

命令方式

```powershell
[root@greatdb1 ~]# greatsqld_safe --defaults-file=/greatdb/conf/sqlnode3306.cnf &
```

指令碼方式，推薦使用

```powershell
[root@greatdb1 ~]# /greatdb/sh/sqlnode3306.sh start
```
![在這裡插入圖片描述](https://img-blog.csdnimg.cn/f6fb522732ca42cda22f8c35ecf99835.png?x-oss-process=image/watermark,type_d3F5LXplbmhlaQ,shadow_50,text_Q1NETiBA5LiH6YeM5pWw5o2u5bqT,size_20,color_FFFFFF,t_70,g_se,x_16)

## SqlNode 重啟方式

命令方式

```powershell
[root@greatdb1 ~]# greatsql -ugreatdb -pgreatdb -h192.168.0.81 -P3306
GreatDB Cluster[(none)]> restart;
或
GreatDB Cluster[(none)]> CALL mysql.greatdb_restart_sqlnode_server('192.168.0.83', 3306);
Query OK, 1 row affected (0.02 sec)
```

指令碼方式，推薦使用

```powershell
[root@greatdb1 ~]# /greatdb/sh/sqlnode3306.sh restart
Enter password:
```

## DataNode 關閉方式

命令方式

```powershell
[root@greatdb1 ~]# greatsqladmin -ugreatdb -pgreatdb -h192.168.0.81 -P4406 shutdown
或
[root@greatdb1 ~]# greatsql -ugreatdb -pgreatdb -h192.168.0.81 -P4406
GreatDB Cluster[(none)]> shutdown;
```

sqlnode層呼叫程式介面關閉

```powershell
[root@greatdb1 ~]# greatsql -ugreatdb -pgreatdb -h192.168.0.81 -P3306

GreatDB Cluster[(none)]> select NODE_ID,NODE_NAME,SHARD_ID,SHARD_NAME,HOST,PORT,NODE_STATE from information_schema.GREATDB_DATANODES;
+---------+-----------+----------+------------+--------------+------+---------------+
| NODE_ID | NODE_NAME | SHARD_ID | SHARD_NAME | HOST         | PORT | NODE_STATE    |
+---------+-----------+----------+------------+--------------+------+---------------+
|      36 | datanode1 |       36 | shard1     | 192.168.0.81 | 4406 | STATE_STANDBY |
|      43 | datanode2 |       36 | shard1     | 192.168.0.82 | 4406 | STATE_ACTIVE  |
|      50 | datanode3 |       36 | shard1     | 192.168.0.83 | 4406 | STATE_STANDBY |
|      64 | datanode4 |       64 | shard2     | 192.168.0.81 | 4407 | STATE_ACTIVE  |
|      71 | datanode5 |       64 | shard2     | 192.168.0.82 | 4407 | STATE_STANDBY |
|      78 | datanode6 |       64 | shard2     | 192.168.0.83 | 4407 | STATE_STANDBY |
|      92 | datanode7 |       92 | shard3     | 192.168.0.81 | 4408 | STATE_ACTIVE  |
|      99 | datanode8 |       92 | shard3     | 192.168.0.82 | 4408 | STATE_STANDBY |
|     106 | datanode9 |       92 | shard3     | 192.168.0.83 | 4408 | STATE_STANDBY |
+---------+-----------+----------+------------+--------------+------+---------------+
9 rows in set (0.01 sec)

GreatDB Cluster[(none)]> call mysql.greatdb_stop_datanode_server('datanode1');
Query OK, 1 row affected (0.02 sec)
```

指令碼方式，推薦使用

```powershell
[root@greatdb1 ~]# cat /greatdb/sh/datanode4406.sh
#!/bin/sh

MYSQL_BASE=/greatdb/svr/greatdb
MYSQL_CONF=/greatdb/conf/datanode4406.cnf
MYSQL_SOCKET=/greatdb/dbdata/datanode4406/data/greatdb.sock

export PATH=$MYSQL_BASE/bin:/usr/sbin:/usr/bin:/sbin:/bin
export LD_LIBRARY_PATH=$MYSQL_BASE/lib

if [ "$1" = "stop" ] ; then
    $MYSQL_BASE/bin/greatsqladmin --defaults-file=$MYSQL_CONF -uroot -p --socket=$MYSQL_SOCKET shutdown
elif [ "$1" = "restart" ]; then
    $MYSQL_BASE/bin/greatsqladmin --defaults-file=$MYSQL_CONF -uroot -p --socket=$MYSQL_SOCKET shutdown
    $MYSQL_BASE/bin/greatdbd_safe --defaults-file=$MYSQL_CONF &
elif [ "$1" = "start" ]; then
    $MYSQL_BASE/bin/greatdbd_safe --defaults-file=$MYSQL_CONF &
else
    echo "usage: $0 start|stop|restart"
fi
```

```powershell
[root@greatdb1 ~]# /greatdb/sh/datanode4406.sh
usage: /greatdb/sh/datanode4406.sh start|stop|restart
[root@greatdb1 ~]# /greatdb/sh/datanode4406.sh stop
Enter password:
```
![image.png](https://img-blog.csdnimg.cn/e0c85a16832146ef810a92a27bb36e50.png?x-oss-process=image/watermark,type_d3F5LXplbmhlaQ,shadow_50,text_Q1NETiBA5LiH6YeM5pWw5o2u5bqT,size_20,color_FFFFFF,t_70,g_se,x_16)

## DataNode 啟動方式

命令方式

```powershell
[root@greatdb1 ~]# greatsqld_safe --defaults-file=/greatdb/conf/datanode4406.cnf &
```

指令碼方式，推薦使用

```powershell
[root@greatdb1 ~]# /greatdb/sh/datanode4406.sh start
```![在這裡插入圖片描述](https://img-blog.csdnimg.cn/8257c590b905469bb2dd6e5e327d9b31.png?x-oss-process=image/watermark,type_d3F5LXplbmhlaQ,shadow_50,text_Q1NETiBA5LiH6YeM5pWw5o2u5bqT,size_20,color_FFFFFF,t_70,g_se,x_16)

DataNode 重啟以後狀態由原來的 ACTIVE 變為 STANDBY 。

## DataNode 重啟方式

命令方式

```powershell
[root@greatdb1 ~]# greatsql -ugreatdb -pgreatdb -h192.168.0.81 -P4406
GreatDB Cluster[(none)]> restart;
```

sqlnode層呼叫程式介面關閉

```powershell
[root@greatdb1 ~]# greatsql -ugreatdb -pgreatdb -h192.168.0.81 -P3306

GreatDB Cluster[(none)]> select NODE_ID,NODE_NAME,SHARD_ID,SHARD_NAME,HOST,PORT,NODE_STATE from information_schema.GREATDB_DATANODES;
+---------+-----------+----------+------------+--------------+------+---------------+
| NODE_ID | NODE_NAME | SHARD_ID | SHARD_NAME | HOST         | PORT | NODE_STATE    |
+---------+-----------+----------+------------+--------------+------+---------------+
|      36 | datanode1 |       36 | shard1     | 192.168.0.81 | 4406 | STATE_STANDBY |
|      43 | datanode2 |       36 | shard1     | 192.168.0.82 | 4406 | STATE_ACTIVE  |
|      50 | datanode3 |       36 | shard1     | 192.168.0.83 | 4406 | STATE_STANDBY |
|      64 | datanode4 |       64 | shard2     | 192.168.0.81 | 4407 | STATE_ACTIVE  |
|      71 | datanode5 |       64 | shard2     | 192.168.0.82 | 4407 | STATE_STANDBY |
|      78 | datanode6 |       64 | shard2     | 192.168.0.83 | 4407 | STATE_STANDBY |
|      92 | datanode7 |       92 | shard3     | 192.168.0.81 | 4408 | STATE_ACTIVE  |
|      99 | datanode8 |       92 | shard3     | 192.168.0.82 | 4408 | STATE_STANDBY |
|     106 | datanode9 |       92 | shard3     | 192.168.0.83 | 4408 | STATE_STANDBY |
+---------+-----------+----------+------------+--------------+------+---------------+
9 rows in set (0.01 sec)

GreatDB Cluster[(none)]> call mysql.greatdb_restart_datanode_server('datanode1');
Query OK, 1 row affected (0.02 sec)
```

指令碼方式，推薦使用

```powershell
[root@greatdb1 ~]# /greatdb/sh/datanode4406.sh restart
Enter password:
```

## GreatDB 叢集啟停某個節點的流程
啟停的節點是 SqlNode
多個 SqlNode 都可以對外提供讀寫服務，如果 SqlNode 上層有負載均衡軟體，例如F5，需要先從負載均衡軟體上踢出要關閉的節點，防止新連線。
檢查要關閉的節點是否有連線

```powershell
[root@greatdb1 ~]# greatsql -ugreatdb -pgreatdb -h192.168.0.81 -P3306
GreatDB Cluster[(none)]> show processlist;
```![image.png](https://img-blog.csdnimg.cn/a330f2d36ed04465ae6a6c8c2aeb032e.png?x-oss-process=image/watermark,type_d3F5LXplbmhlaQ,shadow_50,text_Q1NETiBA5LiH6YeM5pWw5o2u5bqT,size_20,color_FFFFFF,t_70,g_se,x_16)
確認業務沒有連線後，執行 shutdown 操作。

## 啟停的節點是 DataNode

每個 SHARD 是一套主從複製，STATE_ACTIVE 狀態的是主節點，可以對 SqlNode 提供讀寫服務，STATE_STANDBY 狀態的為從節點，只提供只讀服務。
![image.png](https://img-blog.csdnimg.cn/1075f8af4f5947eeb2ea1282ee67a179.png?x-oss-process=image/watermark,type_d3F5LXplbmhlaQ,shadow_50,text_Q1NETiBA5LiH6YeM5pWw5o2u5bqT,size_20,color_FFFFFF,t_70,g_se,x_16)

如果停的 DataNode 是從節點，可以在業務低峰期正常 shutdown。
如果停的 DataNode 是主節點，需要人工手動做主從角色切換後再正常 shutdown。

```powershell
# 人工手動做主從角色切換，例如將 shard1 的主節點切換到 datanode2 上
[root@greatdb1 ~]# greatsql -ugreatdb -pgreatdb -h192.168.0.81 -P3306
# 傳遞兩個引數，一個是要做主從角色切換的 SHARD_NAME，另一個是要將主節點切換到哪個 NODE_NAME 上。
GreatDB Cluster[(none)]> call mysql.greatdb_change_shard_primary_node('shard1','datanode2');
Query OK, 1 row affected (1.08 sec)
```

![image.png](https://img-blog.csdnimg.cn/b374945fabde4e0e9262c79e306a63b5.png?x-oss-process=image/watermark,type_d3F5LXplbmhlaQ,shadow_50,text_Q1NETiBA5LiH6YeM5pWw5o2u5bqT,size_20,color_FFFFFF,t_70,g_se,x_16)
## GreatDB 叢集所有節點整體啟停
停止 GreatDB 叢集所有節點
停止 SqlNode 上層有負載均衡軟體，防止新連線。
停止 所有 SqlNode

```powershell
[root@greatdb1 ~]# /greatdb/sh/sqlnode3306.sh stop
[root@greatdb2 ~]# /greatdb/sh/sqlnode3306.sh stop
[root@greatdb3 ~]# /greatdb/sh/sqlnode3306.sh stop
```

停止 所有 DataNode

```powershell
[root@greatdb1 ~]# /greatdb/sh/datanode4406.sh stop
[root@greatdb1 ~]# /greatdb/sh/datanode4407.sh stop
[root@greatdb1 ~]# /greatdb/sh/datanode4408.sh stop
[root@greatdb2 ~]# /greatdb/sh/datanode4406.sh stop
[root@greatdb2 ~]# /greatdb/sh/datanode4407.sh stop
[root@greatdb2 ~]# /greatdb/sh/datanode4408.sh stop
[root@greatdb3 ~]# /greatdb/sh/datanode4406.sh stop
[root@greatdb3 ~]# /greatdb/sh/datanode4407.sh stop
[root@greatdb3 ~]# /greatdb/sh/datanode4408.sh stop
```

## 啟動 GreatDB 叢集所有節點

先啟動所有 DataNode

```powershell
[root@greatdb1 ~]# /greatdb/sh/datanode4406.sh start
[root@greatdb1 ~]# /greatdb/sh/datanode4407.sh start
[root@greatdb1 ~]# /greatdb/sh/datanode4408.sh start
[root@greatdb2 ~]# /greatdb/sh/datanode4406.sh start
[root@greatdb2 ~]# /greatdb/sh/datanode4407.sh start
[root@greatdb2 ~]# /greatdb/sh/datanode4408.sh start
[root@greatdb3 ~]# /greatdb/sh/datanode4406.sh start
[root@greatdb3 ~]# /greatdb/sh/datanode4407.sh start
[root@greatdb3 ~]# /greatdb/sh/datanode4408.sh start
```
再啟動所有 SqlNode

```powershell
[root@greatdb1 ~]# /greatdb/sh/sqlnode3306.sh start
[root@greatdb2 ~]# /greatdb/sh/sqlnode3306.sh start
[root@greatdb3 ~]# /greatdb/sh/sqlnode3306.sh start
```

把所有例項啟動起來後，登陸任意 SqlNode 執行以下儲存過程

```powershell
[root@greatdb1 ~]# greatsql -ugreatdb -pgreatdb -h192.168.0.81 -P3306
GreatDB Cluster[(none)]> call mysql.greatdb_restart_cluster;
Query OK, 1 row affected (11.15 sec)
```
## GreatDB 叢集目錄結構與日誌檔案介紹

GreatDB 叢集目錄結構
GreatDB叢集初始化完成後，資料目錄分佈如下
![image.png](https://img-blog.csdnimg.cn/09523d750bc44a36856879a02dc8f4e3.png?x-oss-process=image/watermark,type_d3F5LXplbmhlaQ,shadow_50,text_Q1NETiBA5LiH6YeM5pWw5o2u5bqT,size_20,color_FFFFFF,t_70,g_se,x_16)
各個節點資料中到3個子目錄
![image.png](https://img-blog.csdnimg.cn/454f81dd57304b08a12dc9013d40a210.png?x-oss-process=image/watermark,type_d3F5LXplbmhlaQ,shadow_50,text_Q1NETiBA5LiH6YeM5pWw5o2u5bqT,size_20,color_FFFFFF,t_70,g_se,x_16)
## GreatDB 資料庫檔案介紹
GreatDB 例項資料檔案列表
![image.png](https://img-blog.csdnimg.cn/4b9f8c8ff94e43d3a81dbfec60942e8d.png?x-oss-process=image/watermark,type_d3F5LXplbmhlaQ,shadow_50,text_Q1NETiBA5LiH6YeM5pWw5o2u5bqT,size_20,color_FFFFFF,t_70,g_se,x_16)

GreatDB 例項之間進行資料同步的資料日誌
GreatDB 資料日誌型別檔案介紹
![image.png](https://img-blog.csdnimg.cn/2533407686ad4d8d9ee920d289718b2e.png?x-oss-process=image/watermark,type_d3F5LXplbmhlaQ,shadow_50,text_Q1NETiBA5LiH6YeM5pWw5o2u5bqT,size_20,color_FFFFFF,t_70,g_se,x_16)

```powershell
[root@greatdb1 log]# pwd
/greatdb/dbdata/datanode4406/log
[root@greatdb1 log]# ll
total 4227132
# BINLOG
-rw-r-----  1 greatdb greatdb        232 Feb 27 01:38 binlog.000011
-rw-r-----  1 greatdb greatdb        211 Feb 27 01:38 binlog.000012
-rw-r-----  1 greatdb greatdb        894 Feb 27 01:42 binlog.000013
-rw-r-----  1 greatdb greatdb        141 Feb 27 01:40 binlog.index
# REDO LOG
-rw-r-----. 1 greatdb greatdb 1073741824 Feb 27 01:44 ib_logfile0
-rw-r-----. 1 greatdb greatdb 1073741824 Feb 26  2021 ib_logfile1
-rw-r-----. 1 greatdb greatdb 1073741824 Feb 26  2021 ib_logfile2
-rw-r-----. 1 greatdb greatdb 1073741824 Feb 26  2021 ib_logfile3
# RELAY LOG
-rw-r-----  1 greatdb greatdb        220 Feb 27 01:40 relaylog-group_replication_applier.000021
-rw-r-----  1 greatdb greatdb        341 Feb 27 01:42 relaylog-group_replication_applier.000022
-rw-r-----  1 greatdb greatdb        967 Feb 27 01:42 relaylog-group_replication_applier.000023
-rw-r-----  1 greatdb greatdb        225 Feb 27 01:42 relaylog-group_replication_applier.index
-rw-r-----. 1 greatdb greatdb        221 Feb 26  2021 relaylog-group_replication_recovery.000001
-rw-r-----. 1 greatdb greatdb        342 Feb 26  2021 relaylog-group_replication_recovery.000002
-rw-r-----. 1 greatdb greatdb        292 Feb 26  2021 relaylog-group_replication_recovery.000003
-rw-r-----  1 greatdb greatdb        221 Feb 27 01:38 relaylog-group_replication_recovery.000004
-rw-r-----  1 greatdb greatdb        171 Feb 27 01:38 relaylog-group_replication_recovery.000005
-rw-r-----  1 greatdb greatdb        152 Feb 27 01:40 relaylog-group_replication_recovery.000006
-rw-r-----  1 greatdb greatdb        456 Feb 27 01:40 relaylog-group_replication_recovery.index
# UNDO LOG
-rw-r-----. 1 greatdb greatdb   16777216 Feb 27 01:44 undo_001
-rw-r-----. 1 greatdb greatdb   16777216 Feb 27 01:44 undo_002
```
## GreatDB 叢集日誌檔案介紹

叢集故障排查的ERROR日誌

```powershell
[root@greatdb1 logs]# pwd
/greatdb/logs
[root@greatdb1 logs]# ls -lrt error*
-rw-r-----. 1 greatdb greatdb 246739 Feb 26  2021 error3306.log
-rw-r-----. 1 greatdb greatdb  26872 Feb 26  2021 error4408.log
-rw-r-----. 1 greatdb greatdb 280950 Feb 26  2021 error4406.log
-rw-r-----. 1 greatdb greatdb  41437 Feb 26  2021 error4407.log
```

SQL捕獲的慢日誌 SLOW LOG
[r

```powershell
oot@greatdb1 logs]# pwd
/greatdb/logs
[root@greatdb1 logs]# ls -lrt slow*
-rw-r-----. 1 greatdb greatdb 3430 Feb 27 01:40 slow4406.log
-rw-r-----. 1 greatdb greatdb 1581 Feb 27 01:40 slow4407.log
-rw-r-----. 1 greatdb greatdb 1317 Feb 27 01:40 slow4408.log
-rw-r-----. 1 greatdb greatdb 4445 Feb 27 01:42 slow3306.log
```

pt-query-digest 工具可以用來分析慢日誌，將慢日誌格式化後更易於閱讀

```powershell
[root@greatdb1 logs]# yum -y groupinstall perl*
[root@greatdb1 logs]# pt-query-digest slow3306.log > a.log
[root@greatdb1 logs]# cat a.log
```![image.png](https://img-blog.csdnimg.cn/ae3bd5c60d8c498ba204b9898a77ebdf.png?x-oss-process=image/watermark,type_d3F5LXplbmhlaQ,shadow_50,text_Q1NETiBA5LiH6YeM5pWw5o2u5bqT,size_20,color_FFFFFF,t_70,g_se,x_16)

## general log 記錄例項中所有執行的SQL

general log 預設是關閉的，可以設定 general_log 引數開啟

```powershell
[root@greatdb1 ~]# greatsql -ugreatdb -pgreatdb -h192.168.0.81 -P3306
GreatDB Cluster[(none)]> show variables like 'general%';
+------------------+-------------------------------+
| Variable_name    | Value                         |
+------------------+-------------------------------+
| general_log      | OFF                           |
| general_log_file | /greatdb/logs/general3306.log |
+------------------+-------------------------------+
2 rows in set (0.06 sec)

# 配置引數開啟 general_log
GreatDB Cluster[(none)]> set global general_log=ON;
Query OK, 0 rows affected (0.00 sec)

# 配置引數關閉 general_log
GreatDB Cluster[(none)]> set global general_log=ON;
Query OK, 0 rows affected (0.00 sec)
```
## GreatDB 支援的表型別

GreatDB 引入新的 GreatDB 儲存引擎，支援多種表分佈策略。
![image.png](https://img-blog.csdnimg.cn/b3d5178dfce741a59c6f829683382793.png?x-oss-process=image/watermark,type_d3F5LXplbmhlaQ,shadow_50,text_Q1NETiBA5LiH6YeM5pWw5o2u5bqT,size_20,color_FFFFFF,t_70,g_se,x_16)

Normal表：普通表，comment “disttype=normal”
普通表適用於資料量中小規模的配置表
普通表建立命令，通過在 comment 中加入 disttype=normal（預設） 進行指定

```powershell
[root@greatdb1 ~]# greatsql -ugreatdb -pgreatdb -h192.168.0.81 -P3306
GreatDB Cluster> create table test.t_normal(c1 int primary key, c2 int) engine=greatdb comment "disttype=normal";
```

只儲存在資料節點層中的一個Shard上，後端shard表名字和sqlnode名字保持一致。

information_schema.greatdb_table_distribution 可以查詢表在 Shard 上的分佈情況，可以發現 t_normal 表只分布在 shard2 上。

普通表分佈所在shard計算方法：
計算公式：SHARD_M=HASH(DATABASE_NAME+TABLE_NAME)%N（N為shard個數）
1、在進行表建立時，對錶名字以及表所在的庫名整體做HASH運算，結果記為H1.
2、針對H1%N取模求餘操作，得出餘數為M，即普通表分佈對應shard號。
3、表建立後，其分佈策略不會隨著shard數量的增加或減少而發生變更。除非使用者主動對錶進行手動遷移重分佈，遷移到指定的shard中。

## Global表：全域性表（廣播表），comment disttype=global"

全域性表適用於資料基本不變的屬性表或者維度表
全域性表建立命令，通過在 comment 中加入 disttype=global 來指定

```powershell
GreatDB Cluster> create table test.t_global(c1 int primary key, c2 int) engine=greatdb comment "disttype=global";
```

全域性表儲存在後端所有的 Shard 上，每個 Shard 上的資料完全一致，經常與 partition 表進行關聯查詢。

由此可見，Global表被分到了所有的 Shard 上，下面向Global表插入資料，觀察資料在 Shard 上的儲存情況

```powershell
GreatDB Cluster[(none)]> insert into test.t_global values (1,1),(2,2),(3,3);
Query OK, 3 rows affected (0.06 sec)
Records: 3  Duplicates: 0  Warnings: 0

GreatDB Cluster[(none)]> select * from test.t_global;
+----+------+
| c1 | c2   |
+----+------+
|  1 |    1 |
|  2 |    2 |
|  3 |    3 |
+----+------+
3 rows in set (0.00 sec)
```

連線到 DataNode 節點檢視錶的資料

```powershell
[root@greatdb1 ~]# greatsql -ugreatdb -pgreatdb -h192.168.0.81 -P4406 -e 'select * from test.t_global'
greatsql: [Warning] Using a password on the command line interface can be insecure.
+-------------+----+------+
| _hidden_pk_ | c1 | c2   |
+-------------+----+------+
|           1 |  1 |    1 |
|           8 |  2 |    2 |
|          15 |  3 |    3 |
+-------------+----+------+
[root@greatdb1 ~]# greatsql -ugreatdb -pgreatdb -h192.168.0.81 -P4407 -e 'select * from test.t_global'
greatsql: [Warning] Using a password on the command line interface can be insecure.
+-------------+----+------+
| _hidden_pk_ | c1 | c2   |
+-------------+----+------+
|           1 |  1 |    1 |
|           8 |  2 |    2 |
|          15 |  3 |    3 |
+-------------+----+------+
[root@greatdb1 ~]# greatsql -ugreatdb -pgreatdb -h192.168.0.81 -P4408 -e 'select * from test.t_global'
greatsql: [Warning] Using a password on the command line interface can be insecure.
+-------------+----+------+
| _hidden_pk_ | c1 | c2   |
+-------------+----+------+
|           1 |  1 |    1 |
|           8 |  2 |    2 |
|          15 |  3 |    3 |
+-------------+----+------+
```

由此可見，Global表在每個 Shard 上的資料完全一致。

全域性表分佈所在 shard 計算方法
全域性表在後端所有shard中均儲存一份完整資料，後端shard中表名字和sqlnode名字保持一致。
TABLE副本數量 = N*(每個shard內DataNode個數)
1、建表時，叢集結構中有N個shard分片。
2、全域性表會分佈到N個shard中，所有shard的DataNode節點均存放一份完整資料。
3、需要注意的是，當新增新的shard後，新shard中不會儲存全域性表資料，需要使用者執行資料重分佈後，全域性表會自動分佈到新shard。

## Partition表：分割槽表（分散式表）， partition by

分割槽表適用資料量大，頻繁操作的業務表
GreatDB 支援的分割槽表型別有 hash、list、range、key、複合分割槽等，優點是資料儲存量大，查詢快，查詢範圍精準，方便分割槽資料增刪，以及表的分片擴充套件管理。
分割槽表建立命令

```powershell
-- hash分割槽：
create table test.t_hash(c1 int primary key, c2 int) partition by hash(c1) partitions 8;

-- range分割槽：
create table test.t_range(c1 int primary key, c2 int) partition by range(c1) 
(partition p0 values less than (10), 
partition p1 values less than (100), 
partition p4 values less than maxvalue);

-- list分割槽：
create table test.t_list(c1 int primary key, c2 varchar(20)) partition by list(c1) 
(partition beijing values in (1,2,3),
partition shanghai values in (4,5,6));
```

資料水平分散在儲存層的多個 Shard 中

由此可見，分割槽被分散在儲存層的多個 Shard 中，插入資料，檢視 Shard 中的資料儲存情況

```powershell
GreatDB Cluster[(none)]> insert into test.t_hash values (1,1),(2,2),(3,3),(4,4),(5,5),(6,6),(7,7),(8,8);
Query OK, 8 rows affected (0.02 sec)
Records: 8  Duplicates: 0  Warnings: 0

GreatDB Cluster[(none)]> select * from test.t_hash partition (p0);
+----+------+
| c1 | c2   |
+----+------+
|  8 |    8 |
+----+------+
1 row in set (0.00 sec)

GreatDB Cluster[(none)]> select * from test.t_hash partition (p4);
+----+------+
| c1 | c2   |
+----+------+
|  4 |    4 |
+----+------+
1 row in set (0.00 sec)
```

登入到 DataNode 檢視錶的儲存情況

```powershell
# 分割槽表的 p0 和 p4 分割槽在 shard1 上，登入到 shard1 所在的 DataNode 上
[root@greatdb1 ~]# greatsql -ugreatdb -pgreatdb -h192.168.0.81 -P4406
GreatDB Cluster[(none)]> use test
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -A

GreatDB Cluster[test]> select * from `t_hash#p#0`;
+-------------+----+------+
| _hidden_pk_ | c1 | c2   |
+-------------+----+------+
|           1 |  8 |    8 |
+-------------+----+------+
1 row in set (0.00 sec)

GreatDB Cluster[test]> select * from `t_hash#p#4`;
+-------------+----+------+
| _hidden_pk_ | c1 | c2   |
+-------------+----+------+
|           1 |  4 |    4 |
+-------------+----+------+
1 row in set (0.00 sec)
```

分割槽表將表資料按照不同演算法分佈在不同shard中
分割槽表計算節點和後端shard中儲存表名不同，前端建立test分割槽表，後端shard一般顯示為test.pt1#0 , test.pt1#1形式。
1、叢集共有N個shard。
2、針對shard做2的冪次方V值。
3、則每個表的Partition對應的分片號。當表分割槽數小於或等於shard個數時，按p0-pn順序分佈在shard中。當分割槽數大於shard個數時採用shard分佈編號=N% (2^n冪次方值)。
注意：如果分割槽表的分割槽鍵使用唯一性約束，需考慮NULL值的影響，可能導致NULL值資料重複的分佈在同一shard，引起資料分佈不均情況。

## GreatDB 資料重分佈
資料重分佈使用場景
1、資料重分佈在新擴充套件或者縮容shard後，進行資料重分佈。
2、在業務熱點表資料集中訪問，造成節點壓力較大時手動遷移重分佈。
重分佈的2種方式
1、自動重分佈：
CALL mysql.greatdb_auto_migrate_tables_after_upscale;
2、手動重分佈：
CALL mysql.greatdb_migrate_table(‘db_name’, ‘table_name’, part_id, ‘shard_name’ );
資料重分佈規則
1、擴容shard遷移重分佈時，不遷移普通表。
2、擴容、縮容操作針對全域性資料的分片路由會有更新。
3、遷移執行過程可以是指定單表、單個表分割槽進行的。
自動重分佈遷移過程
1、create table 建立表結構。
2、copy remote data 匯入匯出方式。
3、apply remote log 應用日誌。
4、完成遷移，計算節點拓撲變更。
5、新的路由對映資訊直接寫入新的shard分片。

## 手動執行資料重分佈

檢視資料表在 Shard 上的分佈情況

測試表 t_normal 分佈在 shard2，要將其手動重分佈到 shard1

```powershell
CALL `mysql`.`greatdb_migrate_table`('SCHEMA_NAME', 'TABLE_NAME', PARTITION_ID, 'SHARD_NAME' );
-- 例如：
CALL `mysql`.`greatdb_migrate_table`('test', 't_normal', 0, 'shard1' );
```

檢視當前執行的遷移任務

```powershell
GreatDB Cluster[(none)]> SELECT * FROM information_schema.greatdb_task WHERE task_type='MIGRATE_TABLE';
+---------+---------------+-------------------------------------+----------+---------------------+---------------------+
| TASK_ID | TASK_TYPE     | INFO                                | STATUS   | OWNER_INSTANCE_HOST | OWNER_INSTANCE_PORT |
+---------+---------------+-------------------------------------+----------+---------------------+---------------------+
|      43 | MIGRATE_TABLE | test.t_normal from shard2 to shard1 | COMPLETE | 192.168.0.81        |                3306 |
+---------+---------------+-------------------------------------+----------+---------------------+---------------------+
1 row in set (0.00 sec)
```

再次檢視資料表 t_normal 分佈在 shard1

檢視遷移的歷史記錄和狀態資訊

```powershell
GreatDB Cluster[(none)]> SELECT * FROM information_schema.greatdb_migrate_table_task;
+---------+---------------+-------------------------------------+----------------+----------------+------------------+-----------------------+---------------------+-------------+
| TASK_ID | OBJECT_NAME   | INFO                                | MIGRATE_STATUS | STAGE_SEQUENCE | STAGE            | COMPLETED_SUBTASK_NUM | UNKNOWN_SUBTASK_NUM | SUBTASK_NUM |
+---------+---------------+-------------------------------------+----------------+----------------+------------------+-----------------------+---------------------+-------------+
|      43 | test.t_normal | test.t_normal from shard2 to shard1 | COMPLETE       |              1 | CREATE TABLE     |                     1 |                   0 |           1 |
|      43 | test.t_normal | test.t_normal from shard2 to shard1 | COMPLETE       |              2 | COPY REMOTE DATA |                     1 |                   0 |           1 |
|      43 | test.t_normal | test.t_normal from shard2 to shard1 | COMPLETE       |              3 | APPLY_REMOTE_LOG |                     1 |                   0 |           1 |
|      43 | test.t_normal | test.t_normal from shard2 to shard1 | COMPLETE       |              4 | CATCH_REMOTE_LOG |                     1 |                   0 |           1 |
|      43 | test.t_normal | test.t_normal from shard2 to shard1 | COMPLETE       |              5 | CHANGE_TOPOLOGY  |                     1 |                   0 |           1 |
+---------+---------------+-------------------------------------+----------------+----------------+------------------+-----------------------+---------------------+-------------+
5 rows in set (0.03 sec)
```
本文轉載自【墨天輪社群文章，ID賬號：張玉龍 ，原文連結：https://www.modb.pro/u/14816】

萬里GreatDB資料庫的學習之路--GreatDB資料庫的管理和使用（2）

相關文章