MySQL中使用undrop來恢復drop的表（上）

MySQL中可以使用程式語言（比如Python）來解析binlog中DML的逆操作來達到閃回的效果，如果資料不多，手工解析也可以。這也是現在大家碰到的很多DML Flashback的一個基本原理。而如果是DDL，比如DROP,那就得嘆聲氣了。

GitHub上有一個很不錯的專案是undrop,基於InnoDB,也就意味著如果你所在的環境有了drop操作還是存在恢復的可能了，當然這個過程需要謹慎，建議大家在測試環境先練習測試論證後再做決定，當然我們希望這個工具永遠不要排上用場。

這個專案貌似現在關注的人還不太多，最近看阿里的核心月報中也做了解讀。，所以引起了我的注意，帶著好奇心，自己也測試一把。

安裝部署很簡單。

gitclone

make

這裡需要注意的是，你的環境很可能沒有flex包，可以在make之前安裝一下。

yum install flex

然後我們來嘗試編譯一個檔案sys_parser.c，先配置basedir

basedir=/usr/local/mysql_5.7

gcc `$basedir/bin/mysql_config --cflags` `$basedir/bin/mysql_config --libs` -o sys_parser sys_parser.c

這個工具的一個基本原理就是解析ibdata,從裡面解析出我們需要的頁的資訊，即對應的資料字典。

mysql> show tables like '%SYS%';

+--------------------------------------+

| Tables_in_information_schema (%SYS%) |

+--------------------------------------+

| INNODB_SYS_DATAFILES |

| INNODB_SYS_VIRTUAL |

| INNODB_SYS_INDEXES |

| INNODB_SYS_TABLES |

| INNODB_SYS_FIELDS |

| INNODB_SYS_TABLESPACES |

| INNODB_SYS_FOREIGN_COLS |

| INNODB_SYS_COLUMNS |

| INNODB_SYS_FOREIGN |

| INNODB_SYS_TABLESTATS |

+--------------------------------------+

10 rows in set (0.00 sec)

其中這4個資料字典是需要重點關注的。

SYS_COLUMNS| SYS_FIELDS | SYS_INDEXES | SYS_TABLES

這個工具功能蠻豐富，在目錄下有個sakila的資料夾，是一些示例的指令碼，我們可以建立一些看起來和業務相關的表，不過實際上我們可以做個減法，只建立一個我們需要重點關注的表，然後匯入資料即可。

-rw-r--r--. 1 jeanron jeanron 3231472 Dec 16 2011 sakila-data.sql

-rw-r--r--. 1 jeanron jeanron 50019 Dec 16 2011 sakila.mwb

-rw-r--r--. 1 jeanron jeanron 23099 Dec 16 2011 sakila-schema.sql

否則，這一套表結構還算是比較複雜的，存在外來鍵關聯，處理起來需要花些額外的時間。

整個初始化的工作，我們以表actor為例，手工摘取出actor的建表語句，然後執行sakila-data.sql指令碼即可。

mysql> checksum table actor;

+--------------+------------+

| Table | Checksum |

+--------------+------------+

| sakila.actor | 1702520518 |

+--------------+------------+

1 row in set (0.00 sec)

查詢一下表actor的資料量。

mysql> select count(*)from actor;

+----------+

| count(*) |

+----------+

| 200 |

+----------+

1 row in set (0.00 sec)

要解析ibdata,可以使用stream_parser來做。我們指定ibdata的路徑。

# ./stream_parser -f /U01/mysql_5.7_test/n1/ibdata1

Opening file: /U01/mysql_5.7_test/n1/ibdata1

File information:

ID of device containing file: 64512

inode number: 152382

protection: 100640 (regular file)

number of hard links: 1

user ID of owner: 501

group ID of owner: 501

device ID (if special file): 0

blocksize for filesystem I/O: 4096

number of blocks allocated: 155648

time of last access: 1509475823 Wed Nov 1 02:50:23 2017

time of last modification: 1509476206 Wed Nov 1 02:56:46 2017

time of last status change: 1509476206 Wed Nov 1 02:56:46 2017

total size, in bytes: 79691776 (76.000 MiB)

Size to process: 79691776 (76.000 MiB)

All workers finished in 1 sec

整個操作很快，會在當前目錄下生成一個pages-ibdata1的資料夾，下面包含兩個資料夾。

drwxr-xr-x. 2 root root 4096 Nov 1 02:57 FIL_PAGE_INDEX

drwxr-xr-x. 2 root root 4096 Nov 1 02:57 FIL_PAGE_TYPE_BLOB

比如INDEX目錄下，存在大量的頁，比如下面的輸出。

-rw-r--r--. 1 root root 32768 Nov 1 02:57 0000000000000001.page

-rw-r--r--. 1 root root 32768 Nov 1 02:57 0000000000000002.page

-rw-r--r--. 1 root root 32768 Nov 1 02:57 0000000000000003.page

-rw-r--r--. 1 root root 32768 Nov 1 02:57 0000000000000004.page

-rw-r--r--. 1 root root 32768 Nov 1 02:57 0000000000000005.page

-rw-r--r--. 1 root root 16384 Nov 1 02:57 0000000000000011.page

-rw-r--r--. 1 root root 16384 Nov 1 02:57 0000000000000012.page

-rw-r--r--. 1 root root 16384 Nov 1 02:57 0000000000000013.page

-rw-r--r--. 1 root root 16384 Nov 1 02:57 0000000000000014.page

-rw-r--r--. 1 root root 32768 Nov 1 02:57 0000000000000015.page

-rw-r--r--. 1 root root 32768 Nov 1 02:57 0000000000000016.page

-rw-r--r--. 1 root root 16384 Nov 1 02:57 0000000000000017.page

-rw-r--r--. 1 root root 16384 Nov 1 02:57 0000000000000032.page

-rw-r--r--. 1 root root 32768 Nov 1 02:57 0000000000000033.page

-rw-r--r--. 1 root root 16384 Nov 1 02:57 18446744069414584320.page

要解析裡面的內容，我們可以使用另外一個命令c_parser，根據關鍵字sakila/actor來過濾。

./c_parser -4Df pages-ibdata1/FIL_PAGE_INDEX/0000000000000001.page -t dictionary/SYS_TABLES.sql | grep 'sakila/actor'

其中引數4DF，代表檔案格式（4代表檔案格式是 REDUNDANT），D(D 表示只恢復被刪除的記錄),f生成檔案

然後依次使用c_parser來解析頁得到其他幾個資料字典的資訊，比如(SYS_INDEXES,SYS_COLUMNS,SYS_FIELDS)

後續的內容，在下一篇中會持續更新。