---
版本：5.7.29

---

###一、問題提出
一般情況下我們會使用lsof命令來檢視MySQL當前使用的臨時檔案的使用，這是因為這些臨時檔案使用ls命令並不能顯示，在5.7中其建立方式是使用Liunx api mkstemp進行的建立，這種檔案是程式專用的，返回檔案描述符後會使用api unlink進行刪除。原始碼主要就是這一段，其包含在create_temp_file函式中。
```
    org_file=mkstemp(to);
    if (mode & O_TEMPORARY)
      (void) my_delete(to, MYF(MY_WME));
```

在5.7中如下常見的一些功能會用到這種臨時檔案，比如：

- 執行計劃file sort    檔名字MY開頭
```
lsof|grep delete
如:/tmp/MYdRH1GW (deleted)
```
- 大事物binary log快取 檔名字ML開頭
```
lsof|grep delete
如:/tmp/MLq9INFu (deleted)
```
- online DDL 涉及排序比如add key
```
alter table testsort add key(id);
lsof|grep delete
如:
/tmp/ibCxlYQg (deleted)
/tmp/ib51nvZ1 (deleted)
設定 innodb_tmpdir可以將這類檔案放到指定的目錄
```
但是當一個MySQLD程式剛剛啟動的時候我們去檢視這類檔案的時候，會發現很多這類檔案，如下：
```
[root@mgr2 ~]# lsof|grep delete|grep mysql|wc -l
215
[root@mgr2 ~]# 
```
這些檔案大小基本都是0，且都已ib開頭，曾經有朋友問過我這個問題，這裡詳細做一下解釋。

###二、MySQLD初始化後的臨時檔案種類
實際上在5.7中這類檔案均由函式create_temp_file建立，那麼我們就可以在MySQLD啟動的時候將斷點放在上面進行分析了。下面這樣一些檔案，均使用的是ib開頭的臨時檔案。
- srv_monitor_file             (srv0start.cc:2022)：這是我們通常show engine innodb status命令輸出的時候使用到的檔案，主要函式為srv_printf_innodb_monitor。棧針：
![image.png](https://upload-images.jianshu.io/upload_images/7398834-3613c3c27dd26938.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

- srv_dict_tmpfile             (srv0start.cc:2032)：主要和外來鍵建立資訊輸出有關。
- srv_misc_tmpfile           (srv0start.cc:2041)：主要和外來鍵拋錯輸出有關。
- lock_latest_err_file        (lock0lock.cc:465)：主要和死鎖報錯輸出有關。
- dict_foreign_err_file      (dict0dict.cc:1245)：主要和外來鍵拋錯輸出有關。

我們可以發現實際上這些檔案都不會佔用太大，實際上這5個檔案初始化後就已經建立好了。

###三、為什麼lsof預設的輸出會多很多

很明顯我們上面ib打頭的檔案只有5個，那麼我們lsof（不加任何引數）的時候看到的會多很多呢？如下是我初始化啟動的情況下看到的個數：
```
[root@mgr2 support-files]# lsof|grep delete|grep mysql|wc -l
215
[root@mgr2 support-files]# lsof|grep delete|grep mysql
mysqld    12916         mysql   10u      REG                8,5      9765   17109405 /tmp/ibpuzts2 (deleted)
mysqld    12916         mysql   11u      REG                8,5         0   23137683 /tmp/ibA4q9iX (deleted)
mysqld    12916         mysql   12u      REG                8,5         0   23137684 /tmp/ibRdXEl4 (deleted)
mysqld    12916         mysql   13u      REG                8,5         0   23137685 /tmp/ibe6hfHJ (deleted)
mysqld    12916         mysql   19u      REG                8,5         0   23137686 /tmp/ibfb7rps (deleted)
mysqld    12916 12920   mysql   10u      REG                8,5      9765   17109405 /tmp/ibpuzts2 (deleted)
mysqld    12916 12920   mysql   11u      REG                8,5         0   23137683 /tmp/ibA4q9iX (deleted)
mysqld    12916 12920   mysql   12u      REG                8,5         0   23137684 /tmp/ibRdXEl4 (deleted)
mysqld    12916 12920   mysql   13u      REG                8,5         0   23137685 /tmp/ibe6hfHJ (deleted)
mysqld    12916 12920   mysql   19u      REG                8,5         0   23137686 /tmp/ibfb7rps (deleted)
mysqld    12916 12944   mysql   10u      REG                8,5      9765   17109405 /tmp/ibpuzts2 (deleted)
mysqld    12916 12944   mysql   11u      REG                8,5         0   23137683 /tmp/ibA4q9iX (deleted)
mysqld    12916 12944   mysql   12u      REG                8,5         0   23137684 /tmp/ibRdXEl4 (deleted)
mysqld    12916 12944   mysql   13u      REG                8,5         0   23137685 /tmp/ibe6hfHJ (deleted)
mysqld    12916 12944   mysql   19u      REG                8,5         0   23137686 /tmp/ibfb7rps (deleted)
mysqld    12916 12945   mysql   10u      REG                8,5      9765   17109405 /tmp/ibpuzts2 (deleted)
mysqld    12916 12945   mysql   11u      REG                8,5         0   23137683 /tmp/ibA4q9iX (deleted)
mysqld    12916 12945   mysql   12u      REG                8,5         0   23137684 /tmp/ibRdXEl4 (deleted)
此處省略....
```
我們主要關注以下幾列：
- PID：   is the Process IDentification number of the process.
- TID：   is the task (thread) IDentification number
- FD：    is the File Descriptor number of the file            
- SIZE/OFF：is the size of the file or the file offset in bytes
- NAME：is the name of the mount point and file system on which the file resides
更加詳細的自行參考man。

從輸出中我們可以發現
- PID都是12916這正是MySQLD的PID，而它們的TID則不同，這些當然就是多執行緒照成的原因了。
- FD和NAME實際上是有規律的重複的，其實只有5個值而已。這代表我們上面說的5個臨時檔案
- SIZE都比較小。

因此我們可以認為雖然輸出多達215行，但是實際上整個MySQLD程式只開啟了5個檔案而已也就是我們前面說的那5個臨時檔案，這是因為執行緒間檔案描述符（FD）是共享的，每一個執行緒lsof檢視的時候都會顯示這5個臨時檔案，如果我們的MySQL有很多session，那麼執行緒會很多很多，那麼lsof看到的臨時檔案數量就是執行緒資料量*5。因此我們在檢查臨時檔案使用空間情況的時候不要被過多的輸出而嚇到，我們只要輸出MySQLD程式的臨時檔案即可，輸出如下：
```
[root@mgr2 proc]# lsof|grep delete|grep mysql |awk '{if ($3=="mysql") print}' 
mysqld    12916         mysql   10u      REG                8,5      9765   17109405 /tmp/ibpuzts2 (deleted)
mysqld    12916         mysql   11u      REG                8,5         0   23137683 /tmp/ibA4q9iX (deleted)
mysqld    12916         mysql   12u      REG                8,5         0   23137684 /tmp/ibRdXEl4 (deleted)
mysqld    12916         mysql   13u      REG                8,5         0   23137685 /tmp/ibe6hfHJ (deleted)
mysqld    12916         mysql   19u      REG                8,5         0   23137686 /tmp/ibfb7rps (deleted)
或者加上lsof加上引數只看程式的臨時檔案，而不去檢視子執行緒的臨時檔案
[root@mgr2 ~]#lsof -p 12916|grep delete
mysqld  12916 mysql   10u   REG                8,5      9765 17109405 /tmp/ibpuzts2 (deleted)
mysqld  12916 mysql   11u   REG                8,5         0 23137683 /tmp/ibA4q9iX (deleted)
mysqld  12916 mysql   12u   REG                8,5         0 23137684 /tmp/ibRdXEl4 (deleted)
mysqld  12916 mysql   13u   REG                8,5         0 23137685 /tmp/ibe6hfHJ (deleted)
mysqld  12916 mysql   19u   REG                8,5         0 23137686 /tmp/ibfb7rps (deleted)

```

注意MySQL8.0.21下這些臨時檔案的名字有一些變化，Liunx下可能直接（O_TMPFILE flag）使用這種方式建立如下：
```
open(dirname_buf, O_RDWR | O_TMPFILE | O_CLOEXEC,
                      S_IRUSR | S_IWUSR)
我測試得到的名字如下：
[root@mgr4 ~]# lsof|grep a.out|grep delete
a.out     11703          root    3u      REG                8,5         0   24237415 /tmp/#24237415 (deleted)
MySQLD啟動後檢視的臨時檔名如下：
[root@mgr4 ~]# lsof -p 11488|grep delete
mysqld  11488 mysql   10u      REG                8,5         0 24237413 /tmp/#24237413 (deleted)
mysqld  11488 mysql   11u      REG                8,5         0 24237414 /tmp/#24237414 (deleted)
mysqld  11488 mysql   12u      REG                8,5         0 24237416 /tmp/#24237416 (deleted)
mysqld  11488 mysql   19u      REG                8,5         0 24237417 /tmp/#24237417 (deleted)

```
雖然臨時檔名有所變化，但是基本的用途和5.7差不多

###四、執行緒間的檔案描述符（FD）是共享的
這一段沒什麼好解釋的借用Linux系統程式設計的一段說明如下：
![image.png](https://upload-images.jianshu.io/upload_images/7398834-5ea5ffe6194dff1f.png?imageMogr2/auto-orient/strip%7CimageView2/2/w/1240)

###五、測試
我們可以寫一段簡單的多執行緒的程式碼來測試如下（不做任何錯誤判斷）：
```
#include<stdio.h>
#include<stdlib.h>
#include <unistd.h>
#include <string.h>
#include <sys>
#include <sys>
#include <fcntl.h>
#include <pthread.h>

void* u_sleep(void* t)
{
  char file_temp[]="ibXXXXXX";
  int fd = mkstemp(file_temp);
  unlink( file_temp);
  int i = 0;
  char* teststr="aasd";
  printf("thead tmpfile: %s\n",file_temp);
  for(i = 0;i<100000;i++)
  {
    write(fd,teststr,strlen(teststr));
  }
  sleep(100);
}

int main(void)
{
   int ret = 0;
   pthread_t tid[5];
   int i = 0;
   int fd = 0;
   int tid_num = 0;
   int tmp_file_num=5;
   char file_temp[]="ibXXXXXX";
   for(i=0;i<tmp_file_num strcpy="" mkstemp="" printf="" unlink="" file_temp="" for="" pthread_create="" tid_num="" ret="pthread_join(" null="" lsof="" delete="" a.out="" print="" root="" reg="">
                        </tmp_file_num></pthread.h></fcntl.h></sys></sys></string.h></unistd.h></stdlib.h></stdio.h>

MySQL:為什麼lsof會看到這麼多臨時檔案

相關文章