【江湖救急】分散式資源索引系統
最近有個專案需要用到分散式資源索引,簡單點說就是需要建立一箇中心伺服器,對各子站(伺服器)的檔案/資料/影片/圖片等資源建立索引,索引需要包括一些屬性標籤,例如文章分類,圖片大小等。
各子站資源變更時需要及時(允許有稍許延遲)更新索引,部署這套系統時最好不要對子站程式碼做大量變更,也不能要求中心伺服器開發80以外的埠。
本來想用分散式檔案系統,但是因為埠的限制放棄了。現在能想到的辦法只有兩個:
一。在中心伺服器部署mongoDB,子站資源變更時主動更新索引。
二。在中心伺服器部署採集系統,類似於搜尋引擎蜘蛛,定期從子站採集資料。
各位道友還有更好的辦法麼?
各子站資源變更時需要及時(允許有稍許延遲)更新索引,部署這套系統時最好不要對子站程式碼做大量變更,也不能要求中心伺服器開發80以外的埠。
本來想用分散式檔案系統,但是因為埠的限制放棄了。現在能想到的辦法只有兩個:
一。在中心伺服器部署mongoDB,子站資源變更時主動更新索引。
二。在中心伺服器部署採集系統,類似於搜尋引擎蜘蛛,定期從子站採集資料。
各位道友還有更好的辦法麼?
相關文章
- Zipkin開源分散式跟蹤系統分散式
- 資料來源管理 | 分散式NoSQL系統,Cassandra叢集管理分散式SQL
- 分散式系統硬體資源池原理和接入實踐分散式
- Suro —— Netflix開源的分散式資料管道系統分散式
- 分散式系統分散式
- FASTDFS開源分散式檔案系統介紹AST分散式
- 分散式系統2:分散式系統中的時鐘分散式
- 分散式系統:系統模型分散式模型
- 分散式 - 分散式系統的特點分散式
- 分散式系統(三)——分散式事務分散式
- 分散式資料庫系統(DDBS) 概述分散式資料庫
- 分散式系統(Distributed System)資料分散式
- 騰訊重磅開源分散式NoSQL儲存系統DCache分散式SQL
- 一個開源的分散式線上教育系統分散式
- [分散式]分散式計算系統淺析分散式
- 大資料 | 分散式檔案系統 HDFS大資料分散式
- 分散式系統英文參考資料列表分散式
- 分散式系統的跟蹤系統分散式
- 分散式圖片系統分散式
- 分散式系統(二)——GFS分散式
- 分散式系統基礎分散式
- 分散式檔案系統分散式
- 冰激凌和分散式系統分散式
- 關於分散式系統分散式
- 分散式資料庫索引能力大調研分散式資料庫索引
- 大型分散式系統現場,阿里大牛帶你實戰分散式系統分散式阿里
- 分散式:分散式系統下的唯一序列分散式
- 常見開源分散式檔案系統架構對比分散式架構
- Facebook開源分散式系統的NTP時間校準器分散式
- 開源分散式任務排程系統就選:DolphinScheduler分散式
- 【系統設計】分散式鍵值資料庫分散式資料庫
- 什麼是分散式系統!以及分散式系統架構的優缺點!分散式架構
- 【大資料】BigTable分散式資料儲存系統分散式資料庫 | 複習筆記大資料分散式資料庫筆記
- HDFS分散式檔案系統分散式
- 分散式檔案系統-HDFS分散式
- 我理解的分散式系統分散式
- 分散式系統:向量時鐘分散式
- 什麼是分散式系統分散式