MapReduce1架構設計
MapReduces1架構設計
hadoop1.x MR1 (計算+資源作業排程)
存在JobTracker和TaskTracker(map task+reduce task)兩個程式,屬於主從架構
JobTracker:
監控資源和作業排程,透過心跳監控所有TaskTracker和job健康狀況
告訴排程器蹤任務使用資源使用情況
TaskTracker:
負責接收和執行JobTracker傳送的命令
將節點資源使用情況和任務情況彙報JobTracker
TaskScheduler:
任務排程器(FIFO原則 先出先出,根據作業優先 時間先手順序執行)
hadoop1.x MR1 (計算+資源作業排程)
存在JobTracker和TaskTracker(map task+reduce task)兩個程式,屬於主從架構
JobTracker:
監控資源和作業排程,透過心跳監控所有TaskTracker和job健康狀況
告訴排程器蹤任務使用資源使用情況
TaskTracker:
負責接收和執行JobTracker傳送的命令
將節點資源使用情況和任務情況彙報JobTracker
TaskScheduler:
任務排程器(FIFO原則 先出先出,根據作業優先 時間先手順序執行)
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/31441024/viewspace-2155250/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 架構設計思想-微服務架構設計模式架構微服務設計模式
- 架構設計之架構的演變架構
- 架構設計之一——基礎架構架構
- 架構師修煉之道(二)——架構?設計?架構師?架構
- 遊戲架構 遊戲架構設計(8)遊戲架構
- SaaS架構:開放平臺架構設計架構
- 網站架構設計網站架構
- 架構設計方法初探架構
- 常用的設計架構架構
- 架構設計(九):估算架構
- 架構設計方法論架構
- 面向架構程式設計架構程式設計
- SaaS架構:多租戶系統架構設計架構
- SaaS架構:中央庫存系統架構設計架構
- Fresco架構設計賞析架構
- 小程式渲染架構設計架構
- 事件驅動架構設計事件架構
- Dubbo架構設計詳解架構
- 區塊鏈架構設計區塊鏈架構
- 架構設計案例專題架構
- 初探Tomcat的架構設計Tomcat架構
- 秒殺架構模型設計架構模型
- 【Apollo】(2)--- Apollo架構設計架構
- 架構設計的本質架構
- 如何精心設計CDN架構架構
- UI架構設計的演化UI架構
- 理解Underscore的設計架構架構
- .NET企業架構設計架構
- 阿里雲 Faas 架構設計阿里架構
- 流程引擎的架構設計架構
- Springboot專案架構設計Spring Boot架構
- SOLID架構設計原則Solid架構
- 系統架構設計師學習(二)系統架構設計師緒論架構
- 程式碼架構設計-1.為什麼要做好程式碼架構設計架構
- Tomcat 架構原理解析到架構設計借鑑Tomcat架構
- 大道至簡的架構設計思想之:封裝(C系架構設計法,sishuok)架構封裝
- 前端架構設計的方法論前端架構
- thrift原始碼分析-架構設計原始碼架構