一份資料,兩種傳輸方式進行收集。
一份資料:有多臺資料採集節點或者多個資料來源
兩種方式:一種是從依次多個採集節點或者多個資料來源將資料拷貝過來,合併為一個檔案
另外一種是多個採集節點或者資料來源同時向彙總端傳送資料,最後合併為一個檔案
兩種方式的不同:彙總後的資料都是一樣的,但是順序會不一樣
使用gzip命令壓縮合並檔案。。。。最終顯示壓縮後的檔案大小不一樣。。。。
由此可見同樣的資料用gzip壓縮比較大小需要保證順序一致!!壓縮演算法導致順序不同壓縮結果就不同。。。
這個問題折騰了好久才發現,主要原因是對gzip的壓縮演算法不瞭解。。。