hadoop的Linux下簡單安裝步驟

banq發表於2013-08-26
HadoopLinux
首先安裝Hadoop cluster版本：
$ curl -O http://archive.cloudera.com/cdh/3/hadoop-0.20.2-cdh3u6.tar.gz
$ cd /usr/local
$ tar xzvf /path/to/hadoop-0.20.2-cdh3u6.tar.gz
$ ln -s hadoop-0.20.2-cdh3u6 hadoop

配置工作：
$ cd hadoop
$ mv conf conf.original
$ cp -Rp example-confs/conf.pseudo conf


將/usr/local/hadoop/bin加入PATH環境
$ export PATH=/usr/local/hadoop/bin:$PATH

格式化HDFS
建立臨時檔案目錄 /var/lib/hadoop-0.20/
chmod 0777 -R /var/lib/hadoop-0.20/
chmod 0777 -R /usr/local/hadoop/
以普通使用者登入，非ROOT使用者，然後執行：
hadoop namenode -format

出現：O common.Storage: Storage directory /var/lib/hadoop-0.20/cache/hadoop/dfs/name has been successfully formatted.
表示OK。

分別執行：
$ hadoop namenode
$ hadoop datanode
$ hadoop jobtracker
$ hadoop tasktracker

相關文章