Dubbo分散式架構實戰--FastDFS分散式檔案系統的安裝與使用（單節點）

樣例參考視訊：

http://www.roncoo.com/course/view/85d6008fe77c4199b0cdd2885eaeee53

跟蹤伺服器：192.168.4.121 (edu-dfs-tracker-01)

儲存伺服器：192.168.4.125 (edu-dfs-storage-01)

環境：CentOS 6.6

使用者：root

資料目錄：/fastdfs（注：資料目錄按你的資料盤掛載路徑而定）

安裝包：

FastDFS v5.05

libfastcommon-master.zip（是從FastDFS和FastDHT中提取出來的公共C函式庫）

fastdfs-nginx-module_v1.16.tar.gz

nginx-1.6.2.tar.gz

fastdfs_client_java._v1.25.tar.gz

原始碼地址：https://github.com/happyfish100/

下載地址：http://sourceforge.net/projects/fastdfs/files/

官方論壇：http://bbs.chinaunix.net/forum-240-1.html

一、所有跟蹤伺服器和儲存伺服器均執行如下操作

1、編譯和安裝所需的依賴包:

#yum install make cmake gcc gcc-c++

2、安裝libfastcommon:

(1)上傳或下載libfastcommon-master.zip到/usr/local/src目錄

(2)解壓

#cd /usr/local/src/

#unzip libfastcommon-master.zip

#cd libfastcommon-master

(3) 編譯、安裝

#./make.sh

#./make.sh install

libfastcommon預設安裝到了

/usr/lib64/libfastcommon.so

/usr/lib64/libfdfsclient.so

(4)因為FastDFS主程式設定的lib目錄是/usr/local/lib，所以需要建立軟連結.

#ln -s /usr/lib64/libfastcommon.so /usr/local/lib/libfastcommon.so

#ln -s /usr/lib64/libfastcommon.so /usr/lib/libfastcommon.so

#ln -s /usr/lib64/libfdfsclient.so /usr/local/lib/libfdfsclient.so

#ln -s /usr/lib64/libfdfsclient.so /usr/lib/libfdfsclient.so

3、安裝FastDFS

(1)上傳或下載FastDFS原始碼包（FastDFS_v5.05.tar.gz）到/usr/local/src目錄

(2)解壓

#cd /usr/local/src/

#tar -zxvf FastDFS_v5.05.tar.gz

#cd FastDFS

(3)編譯、安裝（編譯前要確保已經成功安裝了libfastcommon）

#./make.sh

#./make.sh install

採用預設安裝的方式安裝,安裝後的相應檔案與目錄：

A、服務指令碼在：

/etc/init.d/fdfs_storaged

/etc/init.d/fdfs_tracker

B、配置檔案在（樣例配置檔案）:

/etc/fdfs/client.conf.sample

/etc/fdfs/storage.conf.sample

/etc/fdfs/tracker.conf.sample

C、命令工具在/usr/bin/目錄下的：

fdfs_appender_test

fdfs_appender_test1

fdfs_append_file

fdfs_crc32

fdfs_delete_file

fdfs_download_file

fdfs_file_info

fdfs_monitor

fdfs_storaged

fdfs_test

fdfs_test1

fdfs_trackerd

fdfs_upload_appender

fdfs_upload_file

stop.sh

restart.sh

(4)因為FastDFS服務指令碼設定的bin目錄是/usr/local/bin，但實際命令安裝在/usr/bin，可以進入

/user/bin目錄使用以下命令檢視fdfs的相關命令：

#cd /usr/bin/

#ls | grep fdfs

因此需要修改FastDFS服務指令碼中相應的命令路徑，也就是把/etc/init.d/fdfs_storaged

和/etc/init.d/fdfs_tracker兩個指令碼中的/usr/local/bin修改成/usr/bin：

#vi fdfs_trackerd

使用查詢替換命令進統一修改:%s+/usr/local/bin+/usr/bin

#vi fdfs_storaged

使用查詢替換命令進統一修改:%s+/usr/local/bin+/usr/bin

二、配置FastDFS跟蹤器(192.168.4.121)

1、複製FastDFS跟蹤器樣例配置檔案,並重新命名:

#cd /etc/fdfs/

#cp tracker.conf.sample tracker.conf

2、編輯跟蹤器配置檔案：

#vi /etc/fdfs/tracker.conf

修改的內容如下：

disabled=false

port=22122

base_path=/fastdfs/tracker

（其它引數保留預設配置，具體配置解釋請參考官方文件說明：

http://bbs.chinaunix.net/thread-1941456-1-1.html）

3、建立基礎資料目錄（參考基礎目錄base_path配置）:

#mkdir -p /fastdfs/tracker

4、防火牆中開啟跟蹤器埠（預設為22122）:

#vi /etc/sysconfig/iptables

新增如下埠行：

-A INPUT -m state --state NEW -m tcp -p tcp --dport 22122 -j ACCEPT

重啟防火牆：

#service iptables restart

5、啟動Tracker：

#/etc/init.d/fdfs_trackerd start

（初次成功啟動，會在/fastdfs/tracker目錄下建立data、logs兩個目錄）

檢視FastDFS Tracker是否已成功啟動：

#ps -ef | grep fdfs

6、關閉Tracker：

#/etc/init.d/fdfs_trackerd stop

7、設定FastDFS跟蹤器開機啟動：

#vi /etc/rc.d/rc.local

新增以下內容：

## FastDFS Tracker

/etc/init.d/fdfs_trackerd start

三、配置FastDFS儲存(192.168.4.125)

1、複製FastDFS儲存器樣例配置檔案,並重新命名:

#cd /etc/fdfs/

#cp storage.conf.sample storage.conf

2、編輯儲存器樣例配置檔案：

#vi /etc/fdfs/storage.conf

修改的內容如下:

disabled=false

port=23000

base_path=/fastdfs/storage

store_path0=/fastdfs/storage

tracker_server=192.168.4.121:22122

http.server_port=8888

（其它引數保留預設配置，具體配置解釋請參考官方文件說明：

http://bbs.chinaunix.net/thread-1941456-1-1.html）

3、建立基礎資料目錄（參考基礎目錄base_path配置）:

#mkdir -p /fastdfs/storage

4、防火牆中開啟儲存器埠（預設為23000）:

#vi /etc/sysconfig/iptables

新增如下埠行：

-A INPUT -m state --state NEW -m tcp -p tcp --dport 23000 -j ACCEPT

重啟防火牆：

#service iptables restart

5、啟動Storage：

#/etc/init.d/fdfs_storaged start

（初次成功啟動，會在/fastdfs/storage目錄下建立data、logs兩個目錄）

檢視FastDFS Storage是否已成功啟動

#ps -ef | grep fdfs

6、關閉Storage：

#/etc/init.d/fdfs_storaged stop

7、設定FastDFS儲存器開機啟動：

#vi /etc/rc.d/rc.local

新增：

## FastDFS Storage

/etc/init.d/fdfs_storaged start

四、檔案上傳測試(192.168.4.121)

1、修改Tracker伺服器中的客戶端配置檔案：

#cp /etc/fdfs/client.conf.sample /etc/fdfs/client.conf

#vi /etc/fdfs/client.conf

base_path=/fastdfs/tracker

tracker_server=192.168.4.121:22122

2、執行如下檔案上傳命令：

#/usr/bin/fdfs_upload_file /etc/fdfs/client.conf /usr/local/src/FastDFS_v5.05.tar.gz

返回ID號：group1/M00/00/00/wKgEfVUYNYeAb7XFAAVFOL7FJU4.tar.gz

（能返回以上檔案ID，說明檔案上傳成功）

六、在每個儲存節點上安裝nginx

1、fastdfs-nginx-module作用說明

FastDFS通過Tracker伺服器,將檔案放在Storage伺服器儲存，但是同組儲存伺服器之間需要進入檔案複製，有同步延遲的問題。假設Tracker伺服器將檔案上傳到了192.168.4.125，上傳成功後檔案ID已經返回給客戶端。此時FastDFS儲存叢集機制會將這個檔案同步到同組儲存192.168.4.126，在檔案還沒有複製完成的情況下，客戶端如果用這個檔案ID在192.168.4.126上取檔案,就會出現檔案無法訪問的錯誤。而fastdfs-nginx-module可以重定向檔案連線到源伺服器取檔案,避免客戶端由於複製延遲導致的檔案無法訪問錯誤。（解壓後的fastdfs-nginx-module在nginx安裝時使用）

2、上傳fastdfs-nginx-module_v1.16.tar.gz到/usr/local/src

3、解壓

#cd /usr/local/src/

#tar -zxvf fastdfs-nginx-module_v1.16.tar.gz

4、修改fastdfs-nginx-module的config配置檔案

#cd fastdfs-nginx-module/src

#vi config

CORE_INCS="$CORE_INCS /usr/local/include/fastdfs /usr/local/include/fastcommon/"

修改為：

CORE_INCS="$CORE_INCS /usr/include/fastdfs /usr/include/fastcommon/"

（注意：這個路徑修改是很重要的，不然在nginx編譯的時候會報錯的）

5、上傳當前的穩定版本Nginx(nginx-1.6.2.tar.gz)到/usr/local/src目錄

6、安裝編譯Nginx所需的依賴包

#yum install gcc gcc-c++ make automake autoconf libtool pcre* zlib openssl openssl-devel

7、編譯安裝Nginx（新增fastdfs-nginx-module模組）

#cd /usr/local/src/

#tar -zxvf nginx-1.6.2.tar.gz

#cd nginx-1.6.2

#./configure --add-module=/usr/local/src/fastdfs-nginx-module/src

#make && make install

8、複製fastdfs-nginx-module原始碼中的配置檔案到/etc/fdfs目錄，並修改

#cp /usr/local/src/fastdfs-nginx-module/src/mod_fastdfs.conf /etc/fdfs/

#vi /etc/fdfs/mod_fastdfs.conf

修改以下配置：

connect_timeout=10

base_path=/tmp

tracker_server=192.168.4.121:22122

storage_server_port=23000

group_name=group1

url_have_group_name =true

store_path0=/fastdfs/storage

9、複製FastDFS的部分配置檔案到/etc/fdfs目錄

#cd /usr/local/src/FastDFS/conf

#cp http.conf mime.types /etc/fdfs/

10、在/fastdfs/storage檔案儲存目錄下建立軟連線,將其連結到實際存放資料的目錄

#ln -s /fastdfs/storage/data/ /fastdfs/storage/data/M00

11、配置Nginx

簡潔版nginx配置樣例：

userroot;

worker_processes  1;

events {

worker_connections  1024;

}

http {

include       mime.types;

default_type  application/octet-stream;

sendfile        on;

keepalive_timeout  65;

server {

listen8888;

server_name  localhost;

location ~/group([0-9])/M00 {

#alias /fastdfs/storage/data;

ngx_fastdfs_module;

}

error_page   500 502 503 504  /50x.html;

location = /50x.html {

root   html;

}

}

}

注意、說明：

A、8888埠值是要與/etc/fdfs/storage.conf中的http.server_port=8888相對應，

因為http.server_port預設為8888,如果想改成80，則要對應修改過來。

B、Storage對應有多個group的情況下，訪問路徑帶group名，如/group1/M00/00/00/xxx，

對應的Nginx配置為：

location~/group([0-9])/M00{

ngx_fastdfs_module;

}

C、如查下載時如發現老報404，將nginx.conf第一行user nobody修改為user root後重新啟動。

12、防火牆中開啟Nginx的8888埠

#vi /etc/sysconfig/iptables

新增：

-A INPUT -m state --state NEW -m tcp -p tcp --dport8888-j ACCEPT

#service iptables restart

13、啟動Nginx

#/usr/local/nginx/sbin/nginx

ngx_http_fastdfs_set pid=xxx

（重啟Nginx的命令為：/usr/local/nginx/sbin/nginx -s reload）

14、通過瀏覽器訪問測試時上傳的檔案

http://192.168.4.125:8888/group1/M00/00/00/wKgEfVUYNYeAb7XFAAVFOL7FJU4.tar.gz

七、FastDFS的使用的Demo樣例講解與演示：

具體內容請參考樣例程式碼和視訊教程

注意：千萬不要使用kill -9命令強殺FastDFS程式，否則可能會導致binlog資料丟失。

關注公眾號：