搭建FastDFS分散式儲存環境（使用Nginx模組）

壹頁書發表於2014-10-04
AST分散式Nginx
上次搭建FastDFS使用的版本是v4.05
http://blog.itpub.net/29254281/viewspace-1283539/
這個版本已經比較舊了

最新的版本是v5.04,由於作者重構了程式碼,所以安裝過程還是有一些不一致.
最新版本下載地址:
http://sourceforge.net/projects/fastdfs/files/
安裝可以參考壓縮包內的INSTALL檔案。

實驗還是搭建一個FastDFS環境,並增加Nginx模組
所用軟體:
FastDFS_v5.04.tar.gz
libfastcommon-master.zip
fastdfs-nginx-module_v1.16.tar.gz
nginx-1.6.2.tar.gz


與之前版本不同的是,v5.04首先需要安裝libfastcommon
下載地址:
https://github.com/happyfish100/libfastcommon.git

1.安裝libfastcommon
在每一臺伺服器上,解壓libfastcommon,進入libfastcommon-master目錄執行
./make.sh
./make.sh install

可以看到libfastcommon.so安裝到了/usr/lib64/libfastcommon.so

但是FastDFS主程式設定的lib目錄是/usr/local/lib
所以需要建立軟連結.
ln -s /usr/lib64/libfastcommon.so /usr/local/lib/libfastcommon.so
ln -s /usr/lib64/libfastcommon.so /usr/lib/libfastcommon.so
ln -s /usr/lib64/libfdfsclient.so /usr/local/lib/libfdfsclient.so
ln -s /usr/lib64/libfdfsclient.so /usr/lib/libfdfsclient.so


2.安裝FastDFS主程式
這個版本似乎已經不需要libevent依賴
在每臺伺服器,解壓縮FastDFS_v5.04.tar.gz,進入FastDFS目錄
執行
./make.sh
./make.sh install
如果上步的軟連結建立成功,就應該會非常順利。

配置Tracker伺服器(192.168.1.70)     
vim /etc/fdfs/tracker.conf檔案,修改如下內容
base_path=/tracker
然後執行命令
fdfs_trackerd tracker.conf

配置Storage伺服器(192.168.1.80,192.168.1.30)
vim /etc/fdfs/storage.conf
group_name=group1
base_path=/storage
store_path0=/storage
tracker_server=192.168.1.70:22122
然後執行命令
fdfs_storaged storage.conf

執行測試,修改Tracker伺服器192.168.1.70的配置檔案/etc/fdfs/client.conf
tracker_server=192.168.1.170:22122
執行命令
[root@mysql1 fdfs]# fdfs_upload_file client.conf /home/nginx/FastDFS_v5.04.tar.gz
group1/M00/00/00/wKgBHlQvrQGARrS6AAU9tcFAzok.tar.gz


3.解壓fastdfs-nginx-module
FastDFS通過Tracker伺服器,將檔案放在Storage伺服器儲存,
但是同組之間的伺服器需要複製檔案,有延遲的問題.
假設Tracker伺服器將檔案上傳到了192.168.1.80,檔案ID已經返回客戶端,
這時,後臺會將這個檔案複製到192.168.1.30,如果複製沒有完成,客戶端就用這個ID在192.168.1.30取檔案,肯定會出現錯誤
這個fastdfs-nginx-module可以重定向連線到源伺服器取檔案,避免客戶端由於複製延遲的問題,出現錯誤。

修改fastdfs-nginx-module的config檔案
原來的內容是
CORE_INCS="$CORE_INCS /usr/local/include/fastdfs /usr/local/include/fastcommon/"

vim /home/nginx/fastdfs-nginx-module/src/config,修改為
CORE_INCS="$CORE_INCS /usr/include/fastdfs /usr/include/fastcommon"

各個版本的位置並不統一.所以需要根據自己的版本修改位置。

4.安裝nginx
在每個Storage伺服器上安裝Nginx
http://blog.itpub.net/29254281/viewspace-1283760/

yum -y install gcc automake autoconf libtool make gcc-c++ pcre* zlib openssl openssl-devel

增加fastdfs-nginx-module模組
./configure \
--prefix=/home/nginx/nginx-1.6.2 \
--sbin-path=/home/nginx/nginx-1.6.2/nginx \
--conf-path=/home/nginx/nginx-1.6.2/nginx.conf \
--pid-path=/home/nginx/nginx-1.6.2/nginx.pid \
--with-http_ssl_module \
--add-module=/home/nginx/fastdfs-nginx-module/src

make -j `cat /proc/cpuinfo | grep processor| wc -l` && make install

複製fastdfs-nginx-module原始碼中的配置檔案到/etc/fdfs
cp /home/nginx/fastdfs-nginx-module/src/mod_fastdfs.conf /etc/fdfs
修改該配置檔案
group_name=group1
tracker_server=192.168.1.70:22122
store_path0=/storage
base_path=/storage

複製FastDFS的配置到/etc/fdfs


修改Nginx配置檔案
        location /M00 {
            root /storage;
            ngx_fastdfs_module;
        }
在/storage目錄下建立軟連線,將其連結到實際存放資料的目錄,
[root@mysql2 storage]# pwd
/storage
[root@mysql2 storage]# ln -s data/ M00

建立軟連結的好處是方便多目錄的管理


啟動Nginx,就可以使用HTTP下載了.

注意事項:
1.FastDFS各個版本安裝方式有差別,需要閱讀INSTALL檔案
2.FastDFS各個元件的預設位置可能不同,需要按照版本建立相應的軟連結



來自 “ ITPUB部落格 ” ，連結：http://blog.itpub.net/29254281/viewspace-1288761/，如需轉載，請註明出處，否則將追究法律責任。

相關文章