Hadoop的叢集環境部署說明

Hadoop 叢集環境搭建是很多學習 hadoop 學習者或者是使用者都必然要面對的一個問題，網上關於 hadoop 叢集環境搭建的博文教程也蠻多的。對於玩 hadoop 的高手來說肯定沒有什麼問題，甚至可以說事 “ 手到擒來 ” 的事情，但對於 hadoop 的初學者來說， hadoop 叢集環境的搭建著實壓力不小。

網上關於 hadoop 叢集環境搭建的文章有很多，可以說是 “ 圖文並茂 ” ，對於新手而言即使步驟再詳細，但看著這麼多步驟，那麼多的指令肯定是會覺得很繁瑣的。畢竟都是從菜鳥一步一步過來的，記得當初做 hadoop 叢集環境搭建真的是很煩瑣。

目前國內的 hadoop 商業發行版雖然比較多，但是在叢集環境的搭建方面基本都很類似或者是相同，指令多、步驟繁瑣。有的時候覺得不免覺得很奇怪，這些發行商為什麼不對 hadoop 的叢集環境部署做一下優化呢？幸運的是總算是讓我找到了一個 hadoop 發行版叢集環境搭建簡單易用。

這裡使用的是一款國產的 hadoop 發行版，大快搜尋推出的 DKhadoop 。叢集環境的部署總體給我的感覺是比較簡單易用，不像以前的一些發行版那麼繁瑣。 下面就給大家以 DKhadoop 為例介紹一下這種簡單易用的 hadoop 叢集環境搭建。

1、 為叢集自定義一個名稱：在安裝叢集組建之前安裝程式需要對主機進行一些環境檢查 工 作， DKhadoop 需要 root 許可權，並通過 ssh 連結到主機。

2、 選擇安裝模式，安裝模式有三種可以選擇，分別是基礎安裝、完整安裝和自定義安裝。基本安裝中包含的服務內容有： hafs-2.6.0 的安裝、 JDK1.7.0_79 安裝、 Yarn-2.6.0 安裝以及 zooleeper-3.4.6 安裝

 

3、 如果選擇完整安裝模式，則需要安裝的服務內容會更多，詳細可以的參考下方圖示內容以及說明部分介紹。

 

4、 自定義安裝模式則可以自主的進行角色配置，通過對主機效能的檢測 DKhadoop 會按照主機效能推薦相應的分配設定。

 

5、 從上述 3 種安裝模式中選擇一個合適的模式後，點選右下角的【繼續】將自動進行組建的安裝，所有組建安裝成功後也就完成了叢集環境的部署。

 

這套 DKhadoop 的叢集環境部署是已經被優化過的了，個人覺得簡單易用。感興趣的朋友可以自己去看一下！

 

 

來自 “ ITPUB部落格 ” ，連結：http://blog.itpub.net/31524777/viewspace-2216208/，如需轉載，請註明出處，否則將追究法律責任。