linux下gzip壓縮同樣內容大小不一樣

玖瘋發表於2014-05-14

  一份資料,兩種傳輸方式進行收集。

  一份資料:有多臺資料採集節點或者多個資料來源

  兩種方式:一種是從依次多個採集節點或者多個資料來源將資料拷貝過來,合併為一個檔案

       另外一種是多個採集節點或者資料來源同時向彙總端傳送資料,最後合併為一個檔案

 

  兩種方式的不同:彙總後的資料都是一樣的,但是順序會不一樣

  使用gzip命令壓縮合並檔案。。。。最終顯示壓縮後的檔案大小不一樣。。。。

 

  由此可見同樣的資料用gzip壓縮比較大小需要保證順序一致!!壓縮演算法導致順序不同壓縮結果就不同。。。

  這個問題折騰了好久才發現,主要原因是對gzip的壓縮演算法不瞭解。。。

相關文章