hadoop之上傳資料到hdfs模式
通過官網配置
執行一些提供的示例 PI :
[hyxy@master hadoop]$ hadoop jar /home/hyxy/soft/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.3.jar pi 10 5
執行一些提供的示例 詞頻統計上傳叢集:
1)本地建立aaa.txt檔案
hello
world
hello
hyxy
2)通過hadoop指令上傳到偽分模式下
[hyxy@master hadoop]$ hadoop fs -put ~/Desktop/aaa.txt /wordcount.txt
3)檢視上傳資料,對應webUI 檢視
[hyxy@master hadoop]$ hadoop fs -ls /
4)執行案例 將結果輸出到outwordcount資料夾中
[hyxy@master hadoop]$ hadoop jar /home/hyxy/soft/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.3.jar wordcount /wordcount.txt outwordcount
5)檢視MR執行結果
[hyxy@master hadoop]$ hadoop fs -ls -R/
[hyxy@master hadoop]$ hadoop fs -ls /outwordcount
6)檢視執行結果:
[hyxy@master hadoop]$ hadoop fs -cat /outwordcount.txt/part-r-00000
hello 2
hyxy 1
world 1
hdfsWebUI --> http://master:50070 可以去這裡檢視自己的hdfs操作結果
相關文章
- Hadoop偽分佈模式(HDFS)Hadoop模式
- 使用Flume消費Kafka資料到HDFSKafka
- 資料到hadoop的遷移Hadoop
- Hadoop–HDFSHadoop
- waterdrop匯出hdfs資料到clickhouse(text,csv,json)JSON
- Hadoop hdfs上傳檔案報錯解決Hadoop
- 上傳資料到內表
- Hadoop系列之HDFS 資料塊Hadoop
- 關於Hadoop HDFS資料均衡。Hadoop
- Hadoop HDFS(二)Hadoop
- Hadoop HDFS(一)Hadoop
- hadoop命令——hdfsHadoop
- Hadoop Shell命令 |HDFS Shell命令| HDFS 命令Hadoop
- HDFS Federation(HDFS 聯邦)(Hadoop2.3)Hadoop
- 科普文:從大資料到Hadoop,Spark,Storm大資料HadoopSparkORM
- hadoop: hdfs API示例HadoopAPI
- hadoop hdfs 命令使用Hadoop
- 【Hadoop踩坑】HDFS上傳、刪除檔案失敗Hadoop
- GoldenGate實時投遞資料到大資料平臺(6)– HDFSGo大資料
- hadoop之 HDFS-Hadoop存檔Hadoop
- Hadoop面試題之HDFSHadoop面試題
- Hadoop原理之——HDFS原理Hadoop
- Hadoop筆記HDFS(1)Hadoop筆記
- Hadoop筆記HDFS(2)Hadoop筆記
- 漫談Hadoop HDFS BalancerHadoop
- hadoop hdfs命令彙總Hadoop
- hadoop 2.0 hdfs HA 搭建Hadoop
- Hadoop(十)HDFS API操作HadoopAPI
- 【大資料】【hadoop】檢視hdfs檔案命令大資料Hadoop
- 傳送JSON資料到伺服器JSON伺服器
- HDFS 命令:用於管理HDFS的Hadoop Shell命令大全Hadoop
- Hadoop KMS配置(HDFS透明加密)Hadoop加密
- Hadoop學習筆記—HDFSHadoop筆記
- 【HDFS】HADOOP DISTRIBUTED FILE SYSTEMHadoop
- Hadoop HDFS 設計隨想Hadoop
- hadoop-HDFS優缺點Hadoop
- hadoop hdfs 常用命令Hadoop
- 【Hadoop】HDFS的執行原理Hadoop