使用shell指令碼巧妙統計檔案

在資料遷移的過程中，會產生大量的dump檔案，需要對dump的檔案情況進行一個簡單清晰的管理，比如目錄下的檔案特別多，而且某些表比較大，對應的dump檔案比較多，就想得到一個很簡潔的報告，能夠統計出來每個表有多少個dump檔案。

比如有1000個dump檔案，都是基於 表TEST1,TEST2,TEST3,TEST4的。那麼就想得到一個簡單的統計報告,類似下面的形式

TEST1 100

TEST2 450

TEST3 300

TEST4 150

 

簡單模擬一下這個問題。

使用如下的指令碼a.sh來生成DUMP檔案吧。

for i in {1..$2}
do
touch $1_EXT_$i.dmp
done

 

生成這1000個dump檔案。

[ora11g@rac1 DUMP]$ ksh a.sh TEST1 100
[ora11g@rac1 DUMP]$ ksh a.sh TEST2 450
[ora11g@rac1 DUMP]$ ksh a.sh TEST3 300
[ora11g@rac1 DUMP]$ ksh a.sh TEST4 150

[ora11g@rac1 DUMP]$ ll *.dmp|wc -l
1000

簡單看一下生成的dump的情況。
[ora11g@rac1 DUMP]$ ll *.dmp|tail -10
-rw-r--r-- 1 ora11g dba 0 Aug  7 08:13 TEST4_EXT_91.dmp
-rw-r--r-- 1 ora11g dba 0 Aug  7 08:13 TEST4_EXT_92.dmp
-rw-r--r-- 1 ora11g dba 0 Aug  7 08:13 TEST4_EXT_93.dmp
-rw-r--r-- 1 ora11g dba 0 Aug  7 08:13 TEST4_EXT_94.dmp
-rw-r--r-- 1 ora11g dba 0 Aug  7 08:13 TEST4_EXT_95.dmp
-rw-r--r-- 1 ora11g dba 0 Aug  7 08:13 TEST4_EXT_96.dmp
-rw-r--r-- 1 ora11g dba 0 Aug  7 08:13 TEST4_EXT_97.dmp
-rw-r--r-- 1 ora11g dba 0 Aug  7 08:13 TEST4_EXT_98.dmp
-rw-r--r-- 1 ora11g dba 0 Aug  7 08:13 TEST4_EXT_99.dmp
-rw-r--r-- 1 ora11g dba 0 Aug  7 08:13 TEST4_EXT_9.dmp
[ora11g@rac1 DUMP]$

 

首先需要得到的是在這個目錄下有幾個相關的表。

比如像目前的情況，就需要得到當前目錄下有

TEST1

TEST2

TEST3

TEST4

可以使用如下的命令來統計得到。

[ora11g@rac1 DUMP]$  ls -lrt *.dmp|awk '{print $9}'|awk -F_EXT '{print $1}'|uniq
TEST1
TEST2
TEST3
TEST4

 

然後更近一步，怎麼得到每個表對應多少個dump檔案呢。

可以使用如下的指令碼b.sh來快速得到

ls -lrt *.dmp|awk '{print $9}'|awk -F_EXT '{print $1}'|uniq|xargs -i echo "echo {} \`ls -lrt {}_EXT_[0-9]*.dmp|wc -l \`>> tablst" >test.sh
ksh test.sh
rm test.sh

[ora11g@rac1 DUMP]$ ksh b.sh
[ora11g@rac1 DUMP]$ cat tablst
TEST1 100
TEST2 450
TEST3 300
TEST4 150

這樣檔案的統計工作就很清晰明瞭了。