MapReduce1架構設計

13545163656發表於2018-05-28
MapReduces1架構設計
    hadoop1.x MR1 (計算+資源作業排程)
    存在JobTracker和TaskTracker(map task+reduce task)兩個程式,屬於主從架構




JobTracker:
    監控資源和作業排程,透過心跳監控所有TaskTracker和job健康狀況
    告訴排程器蹤任務使用資源使用情況

TaskTracker:
     負責接收和執行JobTracker傳送的命令
     將節點資源使用情況和任務情況彙報JobTracker
    
TaskScheduler:
     任務排程器(FIFO原則 先出先出,根據作業優先 時間先手順序執行)










來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/31441024/viewspace-2155250/,如需轉載,請註明出處,否則將追究法律責任。

相關文章