linux命令之grep

grep (global search regular expression(RE) and print out the line,全面搜尋正規表示式 並把行列印出來)是一種強大的文字搜尋工具，它能使用正規表示式搜尋文字，並把匹配的行列印出來。Unix 的 grep 家族包括 grep、egrep 和 fgrep。egrep 和 fgrep 的命令只跟 grep 有很小不同。egrep 是 grep 的擴充套件，支援更多的 re 元字元， fgrep 就是 fixed grep 或 fast grep，它們把所有的字母都看作單詞，也就是說，正規表示式中的元字元表示回其自身的字面意義，不再特殊。linux 使用 GNU 版本的 grep。它功能更強，可以通過-G、-E、-F 命令列選項來使用 egrep和 fgrep 的功能。

grep 常用用法

# grep [-acinv] [--color=auto] '搜尋字串' filename
選項與引數：
-a ：將 binary 檔案以 text 檔案的方式搜尋資料
-c ：計算找到 '搜尋字串' 的次數
-i ：忽略大小寫的不同，所以大小寫視為相同
-n ：順便輸出行號
-v ：反向選擇，亦即顯示出沒有 '搜尋字串' 內容的那一行！
--color=auto ：可以將找到的關鍵詞部分加上顏色的顯示喔！

將/etc/passwd，有出現 root 的行取出來

# grep root /etc/passwd
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
#或者
# cat /etc/passwd | grep root
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin

將/etc/passwd，有出現 root 的行取出來,同時顯示這些行在/etc/passwd 的行號

# grep -n root /etc/passwd
1:root:x:0:0:root:/root:/bin/bash
30:operator:x:11:0:operator:/root:/sbin/nologin

在關鍵字的顯示方面，grep 可以使用 --color=auto 來將關鍵字部分使用顏色顯示。 這可是
個很不錯的功能啊！但是如果每次使用 grep 都得要自行加上 --color=auto 又顯的很麻煩～
此時那個好用的 alias 就得來處理一下啦！你可以在 ~/.bashrc 內加上這行：『alias
grep='grep --color=auto'』再以『 source ~/.bashrc 』來立即生效即可喔！ 這樣每次運
行 grep 他都會自動幫你加上顏色顯示啦

將/etc/passwd中沒有出現 root 的行取出來

#grep -v root /etc/passwd
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin

將/etc/passwd，將沒有出現 root 和 nologin 的行取出來

# grep -v root /etc/passwd | grep -v nologin
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin

根據檔案內容遞迴查詢目錄

# grep 'onajax.com' * #在當前目錄搜尋帶'onajax.com'行的檔案
# grep -r ‘onajax.com’ * #在當前目錄及其子目錄下搜尋 'onajax.com'行的檔案
# grep -l -r ‘onajax.com’ * #在當前目錄及其子目錄下搜尋'onajax.com'行的檔案，但是不顯示匹配的行，只顯示匹配的檔案

grep 與正規表示式

字元類

字元類的搜尋：如果我想要搜尋 test 或 taste 這兩個單字時，可以發現到，其實她們有共通
的 't?st' 存在～這個時候，我可以這樣來搜尋：

[root@onajax.com ~]# grep -n 't[ae]st' onajax.com.txt
8:I can't finish the test.
9:Oh! The soup taste good.

其實 [] 裡面不論有幾個位元組，他都謹代表某『一個』位元組， 所以，上面的例子說明了，我需
要的字串是『tast』或『test』兩個字串而已！

字元類的反向選擇 [^]

如果想要搜尋到有 oo 的行，但不想要 oo 前面有 g，如下

[root@onajax.com ~]# grep -n '[^g]oo' onajax.com.txt
2:apple is my favorite food.
3:Football game is not use feet only.
18:google is the best tools for search keyword.
19:goooooogle yes!

第 2,3 行沒有疑問，因為 foo 與 Foo 均可被接受！
但是第 18 行明明有 google 的 goo 啊～別忘記了，因為該行後面出現了 tool 的 too 啊！
所以該行也被列出來～ 也就是說， 18 行裡面雖然出現了我們所不要的專案 (goo) 但是由於
有需要的專案 (too) ， 因此，是符合字串搜尋的喔！
至於第 19 行，同樣的，因為 goooooogle 裡面的 oo 前面可能是 o ，例如：go(ooo)oogle ，
所以，這一行也是符合需求的！

字元類的連續

假設 oo 前面不想要有小寫位元組，所以，我可以這樣寫 [^abcd....z]oo ，
但是這樣似乎不怎麼方便，由於小寫位元組的 ASCII 上編碼的順序是連續的， 因此，我們可以將之簡化為底下這樣：

[root@onajax.com ~]# grep -n '[^a-z]oo' onajax.com.txt
3:Football game is not use feet only.

也就是說，當我們在一組集合位元組中，如果該位元組組是連續的，例如大寫英文/小寫英文/數字等等， 就可以使用[a-z],[A-Z],[0-9]等方式來書寫，那麼如果我們的要求字串是數字與英文,將他全部寫在一起，變成：[a-zA-Z0-9]。
我們要取得有數字的那一行，就這樣：

[root@onajax.com ~]# grep -n '[0-9]' onajax.com.txt
5:However, this dress is about $ 3183 dollars.
15:You are the best is mean you are the no. 1.

行首與行尾位元組 ^ $

行首字元：如果我想要讓 the 只在行首列出呢？ 這個時候就得要使用定位位元組了！

[root@onajax.com ~]# grep -n '^the' onajax.com.txt
12:the symbol '*' is represented as start.

此時，就只剩下第 12 行，因為只有第 12 行的行首是 the 開頭啊～此外， 如果我想要開頭
是小寫位元組的那一行就列出呢？可以這樣：

[root@onajax.com ~]# grep -n '^[a-z]' onajax.com.txt
2:apple is my favorite food.
4:this dress doesn't fit me.
10:motorcycle is cheap than car.
12:the symbol '*' is represented as start.
18:google is the best tools for search keyword.
19:goooooogle yes!
20:go! go! Let's go.

如果我不想要開頭是英文字母，則可以是這樣：

[root@onajax.com ~]# grep -n '^[^a-zA-Z]' onajax.com.txt
1:"Open Source" is a good mechanism to develop programs.
21:# I am VBird

^ 符號，在字元類符號(括號[])之內與之外是不同的！ 在 [] 內代表『反向選擇』，在 [] 之外則代表定位在行首的意義！
那如果我想要找出來，行尾結束為小數點 (.) 的那一行：

[root@onajax.com ~]# grep -n '\.$' onajax.com.txt
1:"Open Source" is a good mechanism to develop programs.
2:apple is my favorite food.
3:Football game is not use feet only.
4:this dress doesn't fit me.
10:motorcycle is cheap than car.
11:This window is clear.
12:the symbol '*' is represented as start.
15:You are the best is mean you are the no. 1.
16:The world <Happy> is the same with "glad".
17:I like dog.
18:google is the best tools for search keyword.

特別注意到，因為小數點具有其他意義(底下會介紹)，所以必須要使用轉義字元()來加以解除其特殊意義！

空白行：

[root@onajax.com ~]# grep -n '^$' onajax.com.txt
22:

因為只有行首跟行尾 (^$)，所以，這樣就可以找出空白行啦！

任意一個位元組 . 與重複位元組 *
這兩個符號在正規表示式的意義如下：

. (小數點)：代表『一定有一個任意位元組』的意思；

* (星號)：代表『重複前一個字元， 0 到無窮多次』的意思，為組合形態

假設我需要找出 g??d 的字串，亦即共有四個位元組， 起頭是 g 而結束是 d ，我可以這樣做：

[root@onajax.com ~]# grep -n 'g..d' onajax.com.txt
1:"Open Source" is a good mechanism to develop programs.
9:Oh! The soup taste good.
16:The world <Happy> is the same with "glad".

因為強調 g 與 d 之間一定要存在兩個位元組，因此，第 13 行的 god 與第 14 行的 gd 就不
會被列出來啦！

如果我想要列出有 oo, ooo, oooo 等等的資料， 也就是說，至少要有兩個(含) o 以上，該如
何是好？

因為 * 代表的是『重複 0 個或多個前面的 RE 字元』的意義， 因此，『o』代表的是：『擁
有空位元組或一個 o 以上的位元組』，因此，『 grep -n 'o' onajax.com.txt 』將會把所
有的資料都列印出來終端上！
當我們需要『至少兩個 o 以上的字串』時，就需要 ooo* ，亦即是：

[root@onajax.com ~]# grep -n 'ooo*' onajax.com.txt
1:"Open Source" is a good mechanism to develop programs.
2:apple is my favorite food.
3:Football game is not use feet only.
9:Oh! The soup taste good.
18:google is the best tools for search keyword.
19:goooooogle yes!

如果我想要字串開頭與結尾都是 g，但是兩個 g 之間僅能存在至少一個 o ，亦即是 gog,
goog, gooog.... 等等，那該如何？

[root@onajax.com ~]# grep -n 'goo*g' onajax.com.txt
18:google is the best tools for search keyword.
19:goooooogle yes!

如果我想要找出 g 開頭與 g 結尾的行，當中的字元可有可無

[root@onajax.com ~]# grep -n 'g.*g' onajax.com.txt
1:"Open Source" is a good mechanism to develop programs.
14:The gd software is a library for drafting programs.
18:google is the best tools for search keyword.
19:goooooogle yes!
20:go! go! Let's go.

因為是代表 g 開頭與 g 結尾，中間任意位元組均可接受，所以，第 1, 14, 20 行是可接受的喔！
這個 .* 的 RE 表示任意字元是很常見的.
如果我想要找出『任意數字』的行？因為僅有數字，所以就成為：

[root@onajax.com ~]# grep -n '[0-9][0-9]*' onajax.com.txt
5:However, this dress is about $ 3183 dollars.
15:You are the best is mean you are the no. 1.

限定連續 RE 字元範圍 {}

我們可以利用 . 與 RE 字元及 * 來配置 0 個到無限多個重複位元組， 那如果我想要限制一個範圍區間內的重複位元組數呢？
舉例來說，我想要找出兩個到五個 o 的連續字串，該如何作？這時候就得要使用到限定範圍的字元 {} 了。

但因為 { 與 } 的符號在 shell 是有特殊意義的，因此， 我們必須要使用字元  來讓他失去特殊意義才行。 至於 {} 的語法是這樣的，假設我要找到兩個 o 的字串，

[root@onajax.com ~]# grep -n 'o\{2\}' onajax.com.txt
1:"Open Source" is a good mechanism to develop programs.
2:apple is my favorite food.
3:Football game is not use feet only.
9:Oh! The soup taste good.
18:google is the best tools for search ke
19:goooooogle yes!

假設我們要找出 g 後面接 2 到 5 個 o ，然後再接一個 g 的字串，他會是這樣：

[root@onajax.com ~]# grep -n 'go\{2,5\}g' onajax.com.txt
18:google is the best tools for search keyword.

如果我想要的是 2 個 o 以上的 goooo....g 呢？除了可以是 gooo*g ，也可以是：

[root@onajax.com ~]# grep -n 'go\{2,\}g' onajax.com.txt
18:google is the best tools for search keyword.
19:goooooogle yes!

擴充套件 grep(grep -E 或者 egrep)：

使用擴充套件 grep 的主要好處是增加了額外的正規表示式元字符集。列印所有包含 NW 或 EA 的行。如果不是使用 egrep，而是 grep，將不會有結果查出。

 # egrep 'NW|EA' testfile
 northwest NW Charles Main 3.0 .98 3
34
 eastern EA TB Savage 4.4 .84 5
20

對於標準 grep，如果在擴充套件元字元前面加，grep 會自動啟用擴充套件選項-E。

#grep 'NW\|EA' testfile
northwest NW Charles Main 3.0 .98 3
34
eastern EA TB Savage 4.4 .84 5
20

搜尋所有包含一個或多個 3 的行。

# egrep '3+' testfile
# grep -E '3+' testfile
# grep '3\+' testfile
#這 3 條命令將會
northwest NW Charles Main 3.0 .98 3
34
western WE Sharon Gray 5.3 .97 5
23
northeast NE AM Main Jr. 5.1 .94 3
13
central CT Ann Stephens 5.7 .94 5
13

搜尋一個或者多個連續的 no 的行。

# egrep '(no)+' testfile
# grep -E '(no)+' testfile
# grep '\(no\)\+' testfile 
#3 個命令返回相同結果，
northwest NW Charles Main 3.0 .98 3
34
northeast NE AM Main Jr. 5.1 .94 3 13
north NO Margot Weber 4.5 .89 5 9

不使用正規表示式

fgrep 查詢速度比 grep 命令快，但是不夠靈活：它只能找固定的文字，而不是規則表示式。如果你想在一個檔案或者輸出中找到包含星號字元的行

fgrep '*' /etc/profile
for i in /etc/profile.d/*.sh ; do
或
grep -F '*' /etc/profile
for i in /etc/profile.d/*.sh ; do

[參考] (https://codersay.github.io/2019/07/25/linux-ming-ling-zhi-grep/)