談談Linux下的資料流重定向和管道命令

阿豪聊乾貨發表於2017-04-23

一、標準輸入、標準輸出、錯誤輸出概述

  1.標準輸入(stdin)是指令資料的輸入,程式碼為0,使用<或者<<,預設是鍵盤。

  2.標準輸出(stdout)是指令執行成功返回的結果,程式碼為1,使用>或者>>,預設在螢幕顯示。

  3.標準錯誤輸出(stderr)是指令執行失敗返回的錯誤資訊,程式碼為2,使用2>或者2>>,預設是螢幕。

二、資料流重定向的使用
      1."<":指定輸入的資料媒介來源(tr 'a-z' 'A-Z' < 檔名:將指定檔案中的小寫字母變為大寫字母輸出到螢幕)

   2.">"、"1>":將正確的內容覆蓋輸出到指定的媒介

   3.">>"、"1>>":將正確的內容追加到指定的媒介

   4."2>":將錯誤覆蓋輸出到指定的媒介

   5."2>>":將錯誤資訊追加輸出到指定的媒介

   6."&>":將正確內容和錯誤資訊覆蓋輸出到指定媒介

   7."&>>":將正確內容和錯誤資訊追加到指定的媒介

   8.多個指令執行
            bash1&&bash2(前者執行成功才會執行後者)

     bash1||bash2(前者執行完畢且失敗才執行後者)

三、管道命令概述

  1.管道命令能夠將一個命令的執行結果經過篩選,只保留我們需要的資訊。 如,/etc目錄下會有大量的檔案,如果使用ls很難找到需要的檔案,因此可以使用管道命令將ls的結果進行一次篩選,只保留需要的資訊。 

  2.管道和資料流重定向的區別:

    管道一詞非常生動形象,原始資料經過管道後,管道會將一部分不需要的資訊過濾掉,只保留使用者所關注的資訊。

    資料流重定向是指定資料在哪裡顯示,預設情況下會在螢幕顯示,我們可以指定它輸出到檔案。

  3.管道命令通過管道符"|"連線

  4.能夠接收標準輸入(stdin),如tail/more/grep等

  5.能夠接收來自前一個指令的資料成功stdin進行處理

四、管道命令的使用

  1.cut:為剪下的意思,它能將一行行的資料按照指定的分隔符切成一列列,然後只顯示特定列的資料.

    cut -d '分隔符' -f n 按照特定的分隔符將資料切分,並只顯示第n列的資料。

    cut -c 起始字元的下標-結束字元的下標 選擇特定範圍內的資料(cut中涉及的下標均從1開始)

  2.grep:關鍵字查詢

    grep [-cinv] [--color=auto] '關鍵詞' 待查詢的檔名

      -c:統計關鍵詞出現的次數

      -i:關鍵詞忽略大小寫

      -n:輸出行號

      -v:反向選擇,即查詢不包含該關鍵字的行

      --color=auto:關鍵詞高亮

    命令 | grep [-引數] ‘關鍵詞’  採用管道,將前一個命令的執行結果輸出給grep,並通過grep的關鍵詞搜尋將符合條件的行搜尋出來。

  3.sort:排序

    sort [-引數] 檔案

      -t:指定分隔符

      -k:選取分隔符後的第幾個欄位進行排序

      -f:排序時忽略選取欄位的大小寫

      -b:取出選取欄位前的空格

      -M:將選取的欄位按照月份來排序(前提是選取欄位就是月份)

      -n:將選取欄位按照資料來排序(前提是選取欄位就是數字)

      -r:反向排序

      -u:去重,若選取欄位有重複,則去掉重複

    命令 | sort [-引數]   使用管道,將前一個命令執行的結果按照指定欄位進行排序。

  4.uniq:只能用於管道,它能夠去除前一個命令執行的結果中完全一樣的行。

    uniq [-引數] -i:忽略大小寫 -c:進行重複行的統計

  5.wc:統計字數、行數、字元數

    wc [-引數] 檔名

     -l 列出行數

     -w 列出字數

     -c 列出字元數

  6.tee:能夠同時將命令執行的結果輸出到指定的檔案和螢幕。只能結合管道使用

    tee [-a] 檔案 -a:以追加的形式寫入檔案。

  7.join:連線兩個檔案

    這個命令與管道無關。 它相當於資料庫中的join連線,將兩張表中指定欄位,且欄位相同的行連線起來。在這裡,它能夠將兩個檔案中指定欄位的相同欄位連線起來,併成一行。

    join [-引數] 檔案1 檔案2

      -t:兩個檔案的欄位分隔符

      -1:第一個檔案的欄位

      -2:第二個檔案的欄位

      -i:忽略所選欄位的大小寫

  8.split:該命令能將一個大檔案切分成若干個小檔案。

    split [-引數] 大檔案 小檔名字字首

      -b:指定小檔案的大小,需要加上單位:b、k、m -l:指定每個小檔案中的行數。  

    大檔案會被切分成若干個小檔案,且小檔案的名字為:小檔名字字首+aa、小檔名字字首+ab、小檔名字字首+ac.

      

相關文章