YARN的日誌聚集配置使用
修改yarn-site.xml檔案
說明：修改路徑$hadoop/etc/hadoop下的yarn-site.xml。新增兩個屬性並儲存上傳伺服器。
屬性1：表示在yanr上開啟聚合日誌服務。屬性2：表示聚合日誌在伺服器上的存留時間。
2、關掉Yarn的resourcemanager服務
3、關掉Yarn的nodemanager服務
3、關掉MapReduce歷史任務服務
4.啟動resourcemanager、nodemanager 、historyserver
sbin/yarn-daemon.sh start resourcemanager
sbin/yarn-daemon.sh start nodemanager
sbin/mr-jobhistory-daemon.sh start historyserver
5、計算/user/beifeng/mapreduce/wordcount/*下檔案單詞出現的次數
image.png
6、檢視聚集日誌
相關文章
- 【Hadoop篇04】Hadoop配置日誌聚集Hadoop
- hadoop配置歷史伺服器&&配置日誌聚集Hadoop伺服器
- Spring Boot日誌的使用和配置Spring Boot
- 使用logrotate配置日誌輪詢logrotate
- 日誌配置
- Apach的配置和日誌
- Django日誌配置Django
- Nginx日誌配置Nginx
- python日誌配置Python
- 【Spring】日誌列印sql，日誌配置列印sqlSpringSQL
- 【YashanDB知識庫】windows配置ODBC跟蹤日誌， 使用日誌定位問題Windows
- springboot使用logback記錄日誌，配置檔案Spring Boot
- Apache 配置日誌切割Apache
- Spring Boot日誌配置Spring Boot
- Logstash 配置Java日誌格式的方法Java
- python日誌記錄器的配置Python
- django開發-log日誌的配置Django
- 使用配置檔案方式記錄Python程式日誌Python
- .netcore console 日誌和配置NetCore
- Django（37）配置django日誌Django
- Spring Boot logback日誌配置Spring Boot
- feign配置日誌不列印
- Mabatis配置錯誤日誌BAT
- 39,日誌列印sql 配置SQL
- FeignClient配置日誌訪問client
- Nginx日誌配置詳解Nginx
- SpringBoot多環境日誌配置Spring Boot
- MySQL InnoDB日誌檔案配置MySql
- Beego（簡介、配置、路由、日誌）Go路由
- mysql5.7 慢日誌配置MySql
- aspnetcore 使用serilog日誌NetCore
- Spring Boot日誌使用Spring Boot
- ELK日誌系統之使用Rsyslog快速方便的收集Nginx日誌Nginx
- Go中使用Zap日誌庫與Lumberjack日誌切割Go
- 日誌服務之使用Nginx模式採集日誌Nginx模式
- nginx日誌配置檔案說明Nginx
- java專案日誌配置檔案Java
- nginx1.24配置logrotate日誌切割Nginxlogrotate