好程式設計師大資料教程分享HadoopHDFS操作命令總結

好程式設計師IT發表於2019-11-12

  好程式設計師大資料教程分享HadoopHDFS 操作命令總結

 

  1. 列出根目錄下所有的目錄或檔案

 

  hadoopfs-ls/

 

  2. 列出 /logs 目錄下的所有目錄和檔案

 

  hadoopfs-ls/logs

 

  3. 列出 /user 目錄及其子目錄下的所有檔案 ( 謹慎使用 )

 

  hadoopfs-ls-R/user

 

  4. 建立 /soft 目錄

 

  hadoopfs-mkdir/soft

 

  5. 建立多級目錄

 

  hadoopfs-mkdir-p/apps/windows/2017/01/01

 

  6. 將本地的 wordcount.jar 檔案上傳到 /wordcount 目錄下

 

  hadoopfs-putwordcount.jar/wordcount

 

  7. /stu/students.txt 檔案複製到本地

 

  hadoopfs-copyToLocal/stu/students.txt

 

  8. word.txt 檔案複製到 /wordcount/input/ 目錄

 

  hadoopfs-copyFromLocalword.txt/wordcount/input

 

  9. word.txt 檔案從本地移動到 /wordcount/input/ 目錄下

 

  hadoopfs-moveFromLocalword.txt/wordcount/input/

 

  10. /stu/students.txt 複製一份為 /stu/students.txt.bak

 

  hadoopfs-cp/stu/students.txt/stu/students.txt.bak

 

  11. /flume/tailout/ 目錄下的子目錄或檔案都複製到 /logs 目錄 ( 如果此目錄不存在會建立 )

 

  hadoopfs-cp/flume/tailout//logs

 

  12. /word.txt 檔案重新命名為 /words.txt

 

  hadoopfs-mv/word.txt/words.txt

 

  13. /words.txt 檔案移動到 /wordcount/input/ 目錄下

 

  hadoopfs-mv/words.txt/wordcount/input/

 

  14. /ws 目錄以及子目錄和檔案都刪除 ( 謹慎使用 )

 

  hadoopfs-rm-r/ws

 

  15. /wordcount/output2/ 目錄下的 a.txt 檔案刪除

 

  hadoopfs-rm/wordcount/output2/a.txt

 

  16. /wordcount/input/ 目錄下面的所有檔案都刪除

 

  hadoopfs-rm/wordcount/input/*

 

  17. 檢視 HDFS 叢集的磁碟空間使用情況

 

  hadoopfs-df-h

 

  18. 檢視 /word.txt 檔案的內容

 

  hadoopfs-cat/word.txt

 

  19. name.txt 檔案中的內容新增到 /wordcount/input/words.txt 檔案中

 

  hadoopfs-appendToFilename.txt/wordcount/words.txt

 

  20. 動態檢視 /wordcount/input/words.txt 檔案的內容

 

  hadoopfs-tail-f/wordcount/words.txt

 

  21. 統計 /flume 目錄總大小

 

  hadoopfs-du-s-h/flume

 

  22. 分別統計 /flume 目錄下各個子目錄 ( 或檔案 ) 大小

 

  hadoopfs-du-s-h/flume/*


來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/69913892/viewspace-2663789/,如需轉載,請註明出處,否則將追究法律責任。

相關文章