1、FastDFS
1.1、瞭解基礎概念
1.1.1、什麼是分散式檔案系統？
- 全稱：Distributed File System，即簡稱的DFS
- 這個東西可以是一個軟體，也可以說是伺服器，和tomcat差不多，即相當於軟體也相當於是伺服器，這個軟體就是用來管理檔案的
- 這個軟體所管理的檔案通常不是在一個伺服器節點上，而是在多個伺服器節點上
- 伺服器節點通過網路相連構成一個龐大的檔案儲存伺服器叢集，這些伺服器都用於儲存檔案資源，通過分散式檔案系統來管理這些伺服器上的檔案
1.1.2、傳統檔案系統 和 分散式檔案系統對比
傳統檔案系統
- 缺點
- 所有的檔案都存放在一臺計算機中，如果這臺計算機掛彩了，那麼就會導致整個服務不可用（ 檔案不能上傳和下載了 )
- 如果這臺計算機磁碟損壞了，那麼會丟失所有的檔案
- 這臺計算機的磁碟空間非常有限，很容易到達磁碟的上限，導致無法上傳檔案
-
回顧玩servlet時的檔案上傳和下載
檔案上傳
- 假如前端轟HTML寫法是如下的樣子：
<div id="image"> <label for="">標題圖片:</label> <input type="file" id="file" name="file" > <img src="" alt="" width="100px" height="150px"> </div>- JS寫法如下：
// 當圖片發生改變時 —— 也就是使用者點選file框，上傳檔案時 $("#file").on( 'change' , function () { // 建立一個FormData空物件，就相當於是偽造了一個form表單 let formData = new FormData(); // 這個FromData物件就用來裝檔案內容 // 檔案的files屬性本質是個陣列 let files = $("#file").prop("files"); formData.append("upFile" , files[0] ); $.ajax( { url: '/ajax/upload.do', type: 'post', data: formData, dataType: 'json', cache: false, // 上傳檔案不需要快取 contentType: false, // 不需要對內容型別進行處理 因為內容是一個FormData物件 processData: false, // 不需要對資料進行處理，因為上面的data是一個FormData物件 // 後臺返回的格式 ： // { "errno":"0" , "data":[ {"alt":"1633528500498.jpg" , "url":"/upload/2021-10-06/1633528500498.jpg"} ] } success: function (info) { info.data.forEach( function (data) { // $("#image img").remove(); // $("#image").append( ' <img src=" '+data.url+' " alt="" width="100px" height="150px"> ' ) /* 注掉的這種是：html中沒有img標籤時使用 因為：使用下面這種方法的情景是 —— 頁面本來就有一個img框（ 即：初始頁面上這個file本身有一張圖片 ），所以下面這種可以做到圖片改變時把圖片的路徑換掉，也就是圖片渲染（ 也是資料回填 的思想 ） 但是：如果頁面一開始file的位置是不應該有圖片的，是後面使用者選了之後才出現圖片預覽效果，那麼：就使用註釋掉的這種方法：追加 */ $("#image img").attr("src" , data.url ); }); } } ); })- 那麼後端的low程式碼如下：
import com.alibaba.fastjson.JSON; import javax.servlet.ServletException; import javax.servlet.annotation.MultipartConfig; import javax.servlet.annotation.WebServlet; import javax.servlet.http.HttpServlet; import javax.servlet.http.HttpServletRequest; import javax.servlet.http.HttpServletResponse; import javax.servlet.http.Part; import java.io.File; import java.io.IOException; import java.time.LocalDate; import java.util.ArrayList; import java.util.Collection; import java.util.Date; import java.util.HashMap; // @MultipartConfig 註解就是檔案註解，要獲取前端的檔案資訊，必須加這個註解，不然做的所有事情都是無用功 @MultipartConfig @WebServlet("/ajax/upload.do") public class UploadServlet extends HttpServlet { @Override protected void doPost(HttpServletRequest req, HttpServletResponse resp) throws ServletException, IOException { /* * 想要構建的是這麼一個玩意兒 * "errno":0 data:[ { url:"圖片地址“ } , { alt:"圖片說明“ } , { href:"null" } ] * * */ ArrayList<Object> list = new ArrayList<>(); Collection<Part> parts = req.getParts(); // 這是獲取前臺上傳的檔案 for (Part part : parts) { // 先構建 data:[ { } , { } ]中的[ { } , { } ] // 獲取檔案的全路徑 // 但是：不同瀏覽器的這個全路徑都不一樣，所以需要擷取從而自定義檔名 String filePath = part.getSubmittedFileName(); // System.out.println(filePath); // 擷取檔案的字尾名 int subFileName = filePath.lastIndexOf("."); String fileSuffix = filePath.substring(subFileName); // 自己給檔案重新定義一個名字，並規定存放的地方 String timeStr = LocalDate.now().toString(); // 獲取當前專案的一個指定資料夾名字，用來儲存檔案 注意：getRealPath這是獲取的當前專案的全路徑，即：從碟符開始的路徑 String proPathName = this.getServletContext().getRealPath("/upload/" + timeStr ); File file = new File(proPathName); if ( !file.exists() ){ file.mkdirs(); } // 拼接檔案字尾名並儲存檔案 long timeStamp = new Date().getTime(); part.write(proPathName + "/" + timeStamp + fileSuffix ); HashMap<String, String> map = new HashMap<>(); map.put( "url" , "/upload/" + timeStr + "/" + timeStamp + fileSuffix ); map.put( "alt" , timeStamp + fileSuffix ); map.put( "href" , null ); list.add(map); } // 再構建"errno":0 data:[ { url:"圖片地址“ } , { alt:"圖片說明“ } , { href:"null" } ] HashMap<String, Object> map = new HashMap<>(); map.put("errno", "0"); map.put("data", list); resp.getWriter().print( JSON.toJSONString(map) ); } }
檔案下載
- 後端low程式碼如下
import javax.servlet.ServletException;
import javax.servlet.ServletOutputStream;
import javax.servlet.annotation.WebServlet;
import javax.servlet.http.HttpServlet;
import javax.servlet.http.HttpServletRequest;
import javax.servlet.http.HttpServletResponse;
import java.io.FileInputStream;
import java.io.IOException;
import java.net.URLEncoder;
@WebServlet("/downFile")
public class downFileInClientServlet extends HttpServlet {
@Override
protected void doGet(HttpServletRequest req, HttpServletResponse resp) throws ServletException, IOException {
doPost(req, resp);
}
@Override
protected void doPost(HttpServletRequest req, HttpServletResponse resp) throws ServletException, IOException {
// 1、獲取讓瀏覽器下載的檔案路徑
String FileRealPath = "D:\\JavaTrainStudy\\servlet\\out\\production\\study06-httpServletResponse\\loginbg.png";
// 2、告知瀏覽器要下載的檔名是什麼？
String fileName = FileRealPath.substring( FileRealPath.lastIndexOf("\\") + 1 );
// 3、讓瀏覽器支援檔案下載
// Content-Disposition這個就是讓瀏覽器支援檔案下載
// URLEncoder.encode（ String s , String enc ) 是為了以防檔名是中文名，這樣就設定編碼格式了，讓瀏覽器能夠解析這個中文檔名
resp.setHeader("Content-Disposition" , "attachment ; filename=" + URLEncoder.encode(fileName , "utf-8"));
// 4、獲取輸入、輸出流物件 並 把伺服器中的檔案輸出到瀏覽器上
FileInputStream fis = new FileInputStream( FileRealPath );
ServletOutputStream os = resp.getOutputStream();
// 建立緩衝區
int len = 0 ;
byte[] buffer = new byte[1024];
while ( ( len = fis.read( buffer ) ) > 0 ){
os.write( buffer , 0 , len);
}
// 5、關閉流管道
if ( os != null ){
os.close();
}
if ( fis != null ){
fis.close();
}
}
}
分散式檔案系統
- 優點
- 解決了傳統方式的單點故障問題
- 若某一個節點出現故障，則還有其他的節點可以用來讀取和寫入檔案
- 提供資料備份從而避免磁碟損壞而導致的檔案丟失
- 提供擴容機制，無限增加檔案存放的空間上限
1.2、認識FastDFS
補充：常見的分散式檔案系統
- FastDFS、GFS、HDFS、Lustre 、Ceph 、GridFS 、mogileFS、TFS
1.2.1、瞭解FastDFS
- 官網：https://github.com/happyfish100/fastdfs
- FastDFS是一個開源的輕量級分散式檔案系統，為網際網路應用量身定做，簡單、靈活、高效，採用C語言開發，由阿里巴巴開發並開源
- FastDFS對檔案進行管理，功能包括：檔案儲存、檔案同步( 指的是：檔案系統 和 資料備份之間的同步 )、檔案上傳、檔案下載、檔案刪除等
- FastDFS解決了大容量檔案儲存的問題
- FastDFS特別適合以檔案為載體的線上服務，如相簿網站、文件網站、圖片網站、視訊網站等
- FastDFS充分考慮了冗餘備份、線性擴容等機制，並注重高可用、高效能等指標，使用FastDFS很容易搭建一套高效能的檔案伺服器叢集提供檔案上傳、下載等服務
- 冗餘備份：指的是檔案系統中存的檔案 和 資料備份中存的檔案完全一致的問題
- 線性擴容：檔案系統 和 資料備份不斷增加唄( 就是上圖中再加幾份嘛 ），和水平擴容類似
- 冗餘備份：指的是檔案系統中存的檔案 和 資料備份中存的檔案完全一致的問題
1.2.2、FastDFS的組成結構
- 由兩大部分構成，一個是客戶端，一個是服務端
- 客戶端：指我們的程式，比如我們的Java程式去連線FastDFS、操作FastDFS，那我們的Java程式就是一個客戶端。FastDFS提供專有API訪問，目前提供了C、Java和PHP幾種程式語言的API，用來訪問FastDFS檔案系統
- 服務端由兩個部分構成：一個是跟蹤器（tracker），一個是儲存節點（storage）
- 跟蹤器 tracker：這個玩意兒類似於Erueka / zookeeper註冊中心，起到一個排程的作用。它是在記憶體中記錄叢集中儲存節點storage的狀態資訊，是前端Client和後端儲存節點storage的樞紐，因為相關資訊全部在記憶體中，Tracker server的效能非常高，一個較大的叢集（比如上百個group，group指的就是：檔案系統 和 資料備份的組合，這二者就是一個group）中有3臺就足夠了
- 儲存節點 storage：用於儲存檔案，包括檔案和檔案屬性（meta data，如：檔名、檔案大小、檔案字尾...）都儲存到儲存伺服器磁碟上。以及完成檔案管理的所有功能：檔案儲存、檔案同步和提供檔案訪問( 上傳、下載、刪除 )等
2、開始玩FastDFS
2.1、安裝FastDFS
-
注：我的系統是centos 7
-
安裝需要的依賴環境 gcc、libevent、libevent-devel
yum install gcc libevent libevent-devel -y
- 安裝公共函式庫libfastcommon 和 fastDFS壓縮包
- 自行去前面官網中進行下載，當然：官網的wiki中有線上拉取命令
- 解壓公共函式庫libfastcommon
tar -zxvf libfastcommon-1.0.36.tar.gz
- 進入libfastcommon，執行裡面的make.sh，編譯公共函式
./make.sh
# 當然：可以把命令進行合併 執行如下命令 就是編譯並安裝
./make.sh && ./make.sh install
- 安裝公共函式
./make.sh install
- 解壓
fastdfs-5.11.tar.gz壓縮包
tar -zxvf fastdfs-5.11.tar.gz
- 進入解壓之後的檔案，使用
make sh進行編譯
./make.sh
# 一樣的可以用組合命令 即：編譯並安裝
./make.sh && ./make.sh install
- 安裝
./make.sh install
- 檢查是否安裝成功，進入如下的目錄即可
cd /usr/bin
- 往後找，出現這些fdfs開頭的檔案就表示成功（ 這些檔案就是fastDFS的相關命令 )
- fastDFS配置檔案所在地，進入如下目錄即可
- 想要讓fastDFS的配置檔案生效，那麼就需要放到下面的這個目錄中
cd /etc/fdfs
- 拷貝兩個配置檔案到
etc/fdfs中，這兩個配置檔案在解壓的fastDFS的conf中，一個叫http.conf，一個叫mime.types
# 供nginx訪問使用
cp http.conf /etc/fdfs
# 供nginx訪問使用
cp mime.types /etc/fdfs
2.2、啟動FastDFS
- 這個玩意兒不可以直接啟動，因為預設的配置檔案中有一些關於檔案目錄的配置是不存在的，因此：只要直接啟動就會報錯
2.2.1、修改配置檔案
- 要修改的檔案就兩個
- 以防萬一，因此：將上面的檔案拷貝一份
/etc/fdfs
mv storage.conf.sample ./storage.conf
mv tracker.conf.sample ./tracker.conf
2.2..1.1、修改tracker.conf
- 在這個配置檔案中有一個
base_path配置，指向的是fastDFS作者餘慶的地址，而我們自己的linux中並沒有這個目錄，因此：做修改
vim tracker.conf
# 搜尋此配置
/base_path
# 改成的值，也可以自定義自己的目錄（ 注意：需要保證這個目錄必須存在，沒存在那就需要建立 ）
base_path=/opt/fastdfs/tracker
- 注意：需要保證這個目錄必須存在，沒存在那就需要建立
2.2.1.2、修改storage.conf
- 需要改的內容如下
# storage儲存資料目錄
base_path=/opt/fastdfs/storage
# 真正存放檔案的目錄
store_path0=/opt/fastdfs/storage/files
# 註冊當前儲存節點的跟蹤器地址
tracker_server=伺服器ip:22122
- 注意：要是前面的那三個目錄沒有的話，記得建立，若指向的是已經建立好的目錄，那就不用建立了
mkdir -p /opt/fastdfs/tracker
mkdir -p /opt/fastdfs/storage
mkdir -p /opt/fastdfs/storage/files
2.2.2、開啟fastDFS
- 在任意目錄下，執行如下的命令即可
# 啟動tracker 要想看fdfs_trackerd的命令用法，那直接輸入fdfs_trackerd就可以彈出其用法了
# 如：要關閉tracker，則命令為：fdfs_trackerd /etc/fdfs/tracker.conf stop
# 開啟 | 重啟就是把stop改成start | restart即可
fdfs_trackerd /etc/fdfs/tracker.conf
# 啟動storage
fdfs_storaged /etc/fdfs/storage.conf
- 檢視是否啟動成功
ps -ef | grep fdfs
- 如下圖表示啟動成功
- 但是上面的啟動會有坑兒，所以需要確認一把
# 檢視日誌檔案是否有報ERROR
cd /opt/fastdfs/storage/logs/storage.log
- 若是發現日誌中報的是如下資訊
ERROR - file: storage_ip_changed_dealer.c, line: 180, connect to tracker server 伺服器ip:22122 fail, errno: 110, error info: Connection timed out
即：連結超時
- 這種情況一般都是22122埠沒開放
# 開放22122埠
firewall-cmd --zone=public --add-port=22122/tcp --permanent
# 重啟防火牆
systemctl restart firewalld.service
# 當然：要是雲伺服器的話，直接在web管理介面中新增規則（ 開放22122埠 ) 即可
2.2.3、檢視預設建立的檔案數
- 進入如下的目錄
cd /opt/fastdfs/storage/files/data
-
這裡面有256個資料夾，而每一個資料夾裡面又有256個資料夾，即256 * 256個資料夾，總的資料夾數目為6萬多個
- 這256 * 256個資料夾的作用：解決的就是如下的問題
- 而fastDFS就是使用那256 * 256個資料夾，把檔案分別放入哪些資料夾中，這樣就讓搜尋變得方便了
2.2.4、測試FastDFS
2.2.4.1、測試上傳檔案
- 要能進行測試的話，需要修改一個配置檔案，因為這個配置檔案中的配置資訊是作者餘慶的
- 要修改的內容如下：
# 注意：這個目錄也要保證存在，不存在就是建立 mkdir -p /opt/fastdfs/client
base_path=/opt/fastdfs/client
tracker_server=自己伺服器ip:22122
- 搞一個用來測試上傳的檔案
-
執行檔案上傳命令
-
可以使用如下命令看一下測試檔案上傳命令是怎麼寫的
-
fdfs_test
-
-
- 提取出測試命令語法
fdfs_test <config_file> <operation>
operation: upload, download, getmeta, setmeta, delete and query_servers
# <> 表示必填
# 因此：在測試中，檔案上傳的指令為：
fdfs_test /etc/fdfs/client.conf upload /root/hello-fastdfs.txt
- 注意：防火牆的問題啊，要是報：
connect to xxx.xx.xx.xx:23000 fail, errno: 113, error info: No route to host，這就是防火牆沒開放23000埠，開啟就可以了
# 開放23000埠
firewall-cmd --zone=public --add-port=23000/tcp --permanent
# 重新整理防火牆
systemctl restart firewalld.service
- 上面成功之後有一堆資訊，很重要
This is FastDFS client test program v5.11
Copyright (C) 2008, Happy Fish / YuQing
FastDFS may be copied only under the terms of the GNU General
Public License V3, which may be found in the FastDFS source kit.
# 這個是說訪問fastdfs的主頁網址 - 目前還不能訪問，需要後面弄
Please visit the FastDFS Home Page http://www.csource.org/
for more detail.
# 這是配置的client.conf中的資訊
[2022-06-01 10:17:07] DEBUG - base_path=/opt/fastdfs/client, connect_timeout=30, network_timeout=60, tracker_server_count=1, anti_steal_token=0, anti_steal_secret_key length=0, use_connection_pool=0, g_connection_pool_max_idle_time=3600s, use_storage_id=0, storage server id count: 0
tracker_query_storage_store_list_without_group:
server 1. group_name=, ip_addr=162.14.66.60, port=23000
group_name=group1, ip_addr=162.14.66.60, port=23000
storage_upload_by_filename
# 重要的資訊在這裡group_name、remote_filename
# group_name就是組名，在前面配置中見過它，就是說的檔案系統 和 資料備份這二者的組合名
# remote_filename 遠端檔名 這是關鍵中的關鍵，告知你：檔案儲存到那裡去了
group_name=group1, remote_filename=M00/00/00/CgAAEGKWzCOACGE1AAACgUQE2TQ590.txt
source ip address: 10.0.0.16
file timestamp=2022-06-01 10:17:07
file size=641
file crc32=1141168436
# 下面這個URL地址很重要，就是去瀏覽器訪問上傳的這個檔案資源的地址，但是：目前還不可以訪問，因為沒有配置Nginx
example file url: http://162.14.66.60/group1/M00/00/00/CgAAEGKWzCOACGE1AAACgUQE2TQ590.txt
storage_upload_slave_by_filename
group_name=group1, remote_filename=M00/00/00/CgAAEGKWzCOACGE1AAACgUQE2TQ590_big.txt
source ip address: 10.0.0.16
file timestamp=2022-06-01 10:17:07
file size=641
file crc32=1141168436
example file url: http://162.14.66.60/group1/M00/00/00/CgAAEGKWzCOACGE1AAACgUQE2TQ590_big.txt
- 單獨說明：
remote_filename
remote_filename=M00/00/00/
M00 指的是：/opt/fastdfs/storage/files/data 就是前面去看預設建立檔案數( 256 * 256 )的位置，跟前面的配置有關啊
00/00/ 指的就是：/opt/fastdfs/storage/files/data目錄下的00子目錄，這裡面的00目錄
CgAAEGKWzCOACGE1AAACgUQE2TQ590.txt 指的是：儲存的檔名 fastdfs會重新生成檔名，以防的就是同名檔案，造成附件覆蓋的問題
- 上圖中幾個檔案解讀
# _big 就是資料備份檔案
# ——m 就是meta data檔案，即：檔案屬性檔案（ 檔名、檔案字尾、檔案大小..... ）
-rw-r--r-- 1 root root 641 Jun 1 10:17 CgAAEGKWzCOACGE1AAACgUQE2TQ590_big.txt
-rw-r--r-- 1 root root 49 Jun 1 10:17 CgAAEGKWzCOACGE1AAACgUQE2TQ590_big.txt-m
# 這兩個就是檔案系統中的檔案
-rw-r--r-- 1 root root 641 Jun 1 10:17 CgAAEGKWzCOACGE1AAACgUQE2TQ590.txt
-rw-r--r-- 1 root root 49 Jun 1 10:17 CgAAEGKWzCOACGE1AAACgUQE2TQ590.txt-m
# CgAAEGKWzCOACGE1AAACgUQE2TQ590_big.txt 和 檔案系統中的CgAAEGKWzCOACGE1AAACgUQE2TQ590.txt存的內容是一樣的
# CgAAEGKWzCOACGE1AAACgUQE2TQ590_big.txt-m 和 CgAAEGKWzCOACGE1AAACgUQE2TQ590.txt-m這兩個備份檔案也是相應的
2.2.4.2、測試檔案下載和刪除
- 前面已經見過對應的語法了
fdfs_test <config_file> <operation>
operation: upload, download, getmeta, setmeta, delete and query_servers
# <> 表示必填
- 變一下就可以了
# 變成下載的命令，然後使用此命令檢視完整命令即可
fdfs_test /etc/fdfs/client.conf download
# 根據執行上面的命令，得到檔案下載的語法
fdfs_test <config_file> download <group_name> <remote_filename>
# 那麼想要下載剛剛上傳的檔案，執行如下的命令即可
fdfs_test /etc/fdfs/client.conf download group1 M00/00/00/CgAAEGKWzCOACGE1AAACgUQE2TQ590.txt
# 其中：group 和 remote_filename都在前面上傳時見過了
# 注：這個下載是下載到當前所在目錄的位置
# 同理：就可以得到檔案刪除的命令了
fdfs_test /etc/fdfs/client.conf delete group1 M00/00/00/CgAAEGKWzCOACGE1AAACgUQE2TQ590.txt
- 以上這些
fdfs_test只會在測試時使用，其他地方基本上都不用的
2.3、安裝Nginx
-
上傳
fastdfs-niginx擴充套件模組 並 解壓 - 使用官網中wiki說明的命令拉取也行 -
安裝nginx，要是有的話就跳過
- 記住兩個目錄
# nginx安裝目錄
/usr/local/nginx_fdfs
# fastdfs-nginx模組的src目錄
/usr/local/fastdfs-nginx-module-master/src
- 進入nginx安裝目錄，進行模組新增配置
# 進入nginx安裝目錄
cd nginx_fdfs
# 執行模組配置
# prefix 就是前面讓記住的nginx安裝目錄 add-module就是fastdfs-nginx模組的src目錄
./configure --prefix=/usr/local/nginx_fdfs --add-module=/usr/local/fastdfs-nginx-module-master/src
- 編譯並安裝
# 在安裝的nginx目錄下載執行下述命令
make & make install
- 註釋事項：Nginx的安裝需要Linux安裝相關的幾個庫，否則編譯會出現錯誤，有這幾個的話就不安裝了
yum install gcc openssl openssl-devel pcre pcre-devel zlib zlib-devel –y
2.3.1、修改需要的配置檔案
- 將fastdfs-nginx擴充套件模組中的
mod_fastdfs.conf檔案複製到/etc/fdfs中
cp /usr/local/fastdfs-nginx-module-master/src/mod_fastdfs.conf /etc/fdfs
- 修改
/etc/fdfs/mod_fastdfs.conf
vim mod_fastdfs.conf
# 修改內容如下：
# 這個目錄要保證存在，不存在就要配置好了建立它 mkdir -p /opt/fastdfs/nginx_mod
base_path=/opt/fastdfs/nginx_mod
tracker_server=自己伺服器ip:22122
# 訪問地址是否帶上組名
url_have_group_name = true
store_path0=/opt/fastdfs/storage/files
- 上面
base_path目錄要是不存在記得建立
- 進入
nginx_fdfs的安裝目錄中，去nginx.conf中配置fastdfs-nginx的擴充套件模組
# 編輯nginx.conf檔案
vim /usr/local/nginx_fdfs/conf/nginx.conf
# 配置內容
location ~ /group[1-9]/M0[0-9] {
ngx_fastdfs_module;
}
# 解讀：ngx_fastdfs_module
# 這個指令不是Nginx本身提供的，是擴充套件模組提供的，根據這個指令找到FastDFS提供的Nginx模組配置檔案，然後找到Tracker，最終找到Stroager
- 啟動
nginx
/usr/local/nginx_fdfs/sbin/nginx -c /usr/local/nginx_fdfs/conf/nginx.conf -t
/usr/local/nginx_fdfs/sbin/nginx -c /usr/local/nginx_fdfs/conf/nginx.conf
# 保險起見，檢視nginx是否啟動成功
ps -ef | grep nginx
- 注意：這裡很容易出現啟動不起來，如果下面這個程式沒有啟動起來
nobody 3895 3894 0 15:45 ? 00:00:00 nginx: worker process
- 那麼：就去檢視日誌檔案
cd /usr/local/nginx_fdfs/logs
# 還有一份日誌中也可能出現錯誤資訊
cd /opt/fastdfs/nginx_mod
2.4、Java操作FastDFS
2.3.2、擴充套件模組執行流程
- 下面這個流程很重要，涉及到另外更深入的知識（ 如：叢集部署FastDFS，本篇部落格沒有說明叢集部署，哪些就是固定命令和流程，百度複製貼上修改即可 ）
2.4.1、檔案上傳
- 在
resources目錄下建立fastdfs.conf檔案，並編寫如下內容：
tracker_server=伺服器ip:22122
- 編寫檔案上傳程式碼
package com.zixieqing;
import org.csource.common.MyException;
import org.csource.fastdfs.*;
import java.io.IOException;
/**
* @author : ZiXieQing
* @version : V1.0.0
* @className : UploadFile
* @description ： 該類功能 FastDFS檔案上傳
* @packageName : com.zixieqing
*/
public class UploadFile {
public static void main(String[] args) {
TrackerServer trackerServer = null;
StorageServer storageServer = null;
try {
// 1、初始化配置檔案
ClientGlobal.init("fastdfs.conf");
// 2、建立tracker客戶端
TrackerClient trackerClient = new TrackerClient();
// 3、獲取trackerServer
trackerServer = trackerClient.getConnection();
// 4、獲取storageServer
storageServer = trackerClient.getStoreStorage(trackerServer);
// 5、建立storage客戶端 - 這個物件就是用來上傳檔案、下載檔案、刪除檔案的
StorageClient storageClient = new StorageClient(trackerServer, storageServer);
// 6、上傳檔案
/*
這裡有兩個API需要了解
String[] upload_file(byte[] file_buff, int offset, int length, String file_ext_name, NameValuePair[] meta_list)
這個API常用來web中上傳檔案的
引數1 file_buff、檔案位元組
offset、length、從檔案的那個位置開始上傳，截止位置
引數4 file_ext_name、檔案字尾
引數5 meta_list、檔案的屬性檔案
String[] upload_file(String local_filename, String file_ext_name, NameValuePair[] meta_list)
這個API是上傳本地檔案的
引數1 local_filename、本地檔案的絕對路徑
引數2 file_ext_name、檔案字尾名
引數3 meta_list、檔案的屬性檔案，linux1中的哪個meta data，一般都不傳
上述這兩個API，注意返回值，這個String[] 很重要，就是涉及到linux中的那個組名group 和 遠端檔名remote_filename
*/
String[] result = storageClient.upload_file("C:\\Users\\ZiXieQing\\Desktop\\相簿\\19.jpg", "jpg", null);
// 7、驗證一下
for (String data : result) {
System.out.println("data = " + data);
}
} catch (IOException e) {
throw new RuntimeException(e);
} catch (MyException e) {
throw new RuntimeException(e);
} finally {
// 8、釋放資源
if (storageServer != null) {
try {
storageServer.close();
} catch (IOException e) {
throw new RuntimeException(e);
}
}
if (trackerServer != null) {
try {
trackerServer.close();
} catch (IOException e) {
throw new RuntimeException(e);
}
}
}
}
}
- 瀏覽器訪問
2.4.2、檔案下載
- 把前面的檔案上傳程式碼改一下即可，換成另一個API而已
package com.zixieqing;
import org.csource.common.MyException;
import org.csource.fastdfs.*;
import java.io.IOException;
/**
* @author : ZiXieQing
* @version : V1.0.0
* @className : DownloadFile
* @description ： 該類功能 fastDFS檔案下載
* @packageName : com.zixieqing
*/
public class DownloadFile {
public static void main(String[] args) {
TrackerServer trackerServer = null;
StorageServer storageServer = null;
try {
// 1、初始化配置檔案
ClientGlobal.init("fastdfs.conf");
// 2、獲取tracker客戶端
TrackerClient trackerClient = new TrackerClient();
// 3、獲取trackerServer
trackerServer = trackerClient.getConnection();
// 4、獲取storageServer
storageServer = trackerClient.getStoreStorage(trackerServer);
// 5、建立storage客戶端
StorageClient storageClient = new StorageClient(trackerServer, storageServer);
// 6、下載檔案
/*
這裡需要知道兩個API
byte[] download_file(String group_name, String remote_filename)
這個API常用於web操作
int download_file(String group_name, String remote_filename, String local_filename)
這個API是把檔案下載到本地磁碟中
這個API的返回值結果很重要
*/
String group = "group1";
String remoteFileName = "M00/00/00/CgAAEGKYRg-AAIrWAAD8cA4U6dY771.jpg";
// 存入本地磁碟路徑+存入磁碟的檔名
String localFileName = "d:/靚妹.jpg";
// 只有返回值是0才表示下載成功，否則只要是其他數字都是下載失敗( 其他數字有可能是組名錯了，遠端檔名錯了........
int result = storageClient.download_file(group, remoteFileName, localFileName);
// 7、驗證
System.out.println("result = " + result);
} catch (IOException e) {
throw new RuntimeException(e);
} catch (MyException e) {
throw new RuntimeException(e);
} finally {
// 8、釋放資源
if (storageServer != null) {
try {
storageServer.close();
} catch (IOException e) {
throw new RuntimeException(e);
}
}
if (trackerServer != null) {
try {
trackerServer.close();
} catch (IOException e) {
throw new RuntimeException(e);
}
}
}
}
}
2.4.3、檔案刪除
package com.zixieqing;
import org.csource.common.MyException;
import org.csource.fastdfs.*;
import java.io.IOException;
/**
* @author : ZiXieQing
* @version : V1.0.0
* @className : DeleteFile
* @description ： 該類功能 FastDFS刪除檔案
* @packageName : com.zixieqing
*/
public class DeleteFile {
public static void main(String[] args) {
TrackerServer trackerServer = null;
StorageServer storageServer = null;
try {
// 1、初始化配置檔案
ClientGlobal.init("fastdfs.conf");
// 2、獲取tracker客戶端
TrackerClient trackerClient = new TrackerClient();
// 3、獲取trackerServer
trackerServer = trackerClient.getConnection();
// 4、獲取storageServer
storageServer = trackerClient.getStoreStorage(trackerServer);
// 5、獲取storage客戶端
StorageClient storageClient = new StorageClient(trackerServer, storageServer);
// 6、執行檔案刪除
/*
int delete_file(String group_name, String remote_filename)
引數1 group_name、組名
引數2 remote_filename、遠端檔名
*/
// 一樣的，返回值是0就表示成功，其他都是刪除失敗
int result = storageClient.delete_file("group", "M00/00/00/CgAAEGKYRg-AAIrWAAD8cA4U6dY771.jpg");
// 7、驗證一下
System.out.println("result = " + result);
} catch (IOException e) {
throw new RuntimeException(e);
} catch (MyException e) {
throw new RuntimeException(e);
}finally {
// 8、釋放資源
if (storageServer != null) {
try {
storageServer.close();
} catch (IOException e) {
throw new RuntimeException(e);
}
}
if (trackerServer != null) {
try {
trackerServer.close();
} catch (IOException e) {
throw new RuntimeException(e);
}
}
}
}
}