什麼是HDFS 分散式儲存
分散式儲存技術的實現,往往離不開底層的分散式儲存框架。根據其儲存的型別,可分為塊儲存,物件儲存和檔案儲存。在主流的分散式儲存技術中,HDFS 屬於檔案儲存,Swift 屬於物件儲存,而Ceph 可支援塊儲存、物件儲存和檔案儲存,故稱為統一儲存。
HDFS 是Hadoop 核心組成之一,是分散式計算中資料儲存管理的基礎,被設計成適合執行在通用硬體上的分散式檔案系統。
HDFS 的功能模組
Client
Client 是使用者與HDFS 互動的手段,當檔案上傳 HDFS 的時候,Client 將檔案切分成一個一個的 Block ,然後進行上傳;Client 通過與NameNode 互動,來獲取檔案的位置資訊;與 DataNode 互動,讀取或者寫入資料;Client 還可以提供NameNode 格式化等一些命令來管理HDFS ;同時,Client 可以通過對HDFS 的增刪改查等操作來訪問HDFS 。
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/70014580/viewspace-2868724/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- HDFS分散式儲存分散式
- HDFS分散式儲存中NameNode 和DataNode 有什麼區別?分散式
- Hadoop HDFS 3.3.1分散式儲存搭建Hadoop分散式
- HDFS分散式儲存的意義及技術解析分散式
- 必須掌握的分散式檔案儲存系統—HDFS分散式
- 分散式檔案儲存hdfs簡介及常用命令分散式
- Hadoop 三劍客之 —— 分散式檔案儲存系統 HDFSHadoop分散式
- 什麼是物件儲存?物件
- 什麼是分散式?分散式
- 分散式檔案系統HDFS,大資料儲存實戰(一)分散式大資料
- Redis 分散式儲存Redis分散式
- SRAM是什麼儲存器
- Hdfs儲存策略
- 什麼是分散式鎖?分散式
- 資料庫mysql儲存是什麼?可以存什麼?資料庫MySql
- 什麼是YottaChain儲存,為什麼說是未來資料儲存的趨勢?AI
- 分散式儲存ceph 物件儲存配置zone同步分散式物件
- DAOS 分散式非同步物件儲存|儲存模型分散式非同步物件模型
- 什麼是分散式系統分散式
- 分散式儲存轉崗記分散式
- Gartner:浪潮儲存進入分散式儲存前三分散式
- 哪些企業需要分散式式儲存?分散式
- 什麼是分散式金融DeFi? - YahooFinance分散式NaN
- 分散式儲存glusterfs詳解【轉】分散式
- GlusterFS企業分散式儲存【轉】分散式
- python如何分散式儲存檔案?Python分散式
- CEPH分散式儲存搭建(物件、塊、檔案三大儲存)分散式物件
- 共享儲存是什麼意思?與DRBD有什麼區別?
- 【分散式鎖的演化】什麼是鎖?分散式
- 杉巖分散式儲存解決方案分散式
- 004.MinIO-DirectPV分散式儲存部署分散式
- GlusterFS分散式儲存學習筆記分散式筆記
- Ceph分散式儲存技術解讀分散式
- Bayou複製分散式儲存系統分散式
- HDFS分散式叢集搭建分散式
- 在Linux中,什麼是SAN和NAS儲存?Linux
- 分散式儲存產業方陣:2022年分散式儲存發展白皮書(附下載)分散式產業
- 分散式賬本技術(DLT)是什麼?分散式