Hadoop生態圖譜
當下Hadoop已經成長為一個龐大的體系,貌似只要和海量資料相關的,沒有哪個領域缺少Hadoop的身影,下面是一個Hadoop生態系統的圖譜,詳細的列舉了在Hadoop這個生態系統中出現的各種資料工具。
- 這一切,都起源自Web資料爆炸時代的來臨
- 資料抓取系統 - Nutch
- 海量資料怎麼存,當然是用分散式檔案系統 - HDFS
- 資料怎麼用呢,分析,處理
- MapReduce框架,讓你編寫程式碼來實現對大資料的分析工作
- 非結構化資料(日誌)收集處理 - fuse,webdav, chukwa, flume, Scribe
- 資料匯入到HDFS中,至此RDBSM也可以加入HDFS的狂歡了 - Hiho, sqoop
- MapReduce太麻煩,好吧,讓你用熟悉的方式來操作Hadoop裡的資料 – Pig, Hive, Jaql
- 讓你的資料可見 - drilldown, Intellicus
- 用高階語言管理你的任務流 – oozie, Cascading
- Hadoop當然也有自己的監控管理工具 – Hue, karmasphere, eclipse plugin, cacti, ganglia
- 資料序列化處理與任務排程 – Avro, Zookeeper
- 更多構建在Hadoop上層的服務 – Mahout, Elastic map Reduce
- OLTP儲存系統 – Hbase
相關文章
- Hadoop演進與Hadoop生態Hadoop
- 初入Hadoop生態系統Hadoop
- Hadoop 基礎之生態圈Hadoop
- Hadoop系列002-從Hadoop框架討論大資料生態Hadoop框架大資料
- Hadoop基礎(二):從Hadoop框架討論大資料生態Hadoop框架大資料
- 透視開源生態,OSGraph——GitHub全域資料圖譜的智慧洞察工具Github
- 阿里雲封神:Gartner看衰的並不是Hadoop生態阿里Hadoop
- 區塊鏈應用|最全區塊鏈生態圖譜釋出,一張圖看清2400個典型專案區塊鏈
- BDA:Hadoop生態大資料工具的漏洞掃描器Hadoop大資料
- Hadoop 2.0產生Hadoop
- 再獲IDC認定!Smartbi入選中國資料智慧/數字平臺生態圖譜
- Hadoop生態系統各元件與Yarn的相容性如何?Hadoop元件Yarn
- Hadoop高階資料分析 使用Hadoop生態系統設計和構建大資料系統Hadoop大資料
- 大資料技術之Hadoop(入門) 第2章 從Hadoop框架討論大資料生態大資料Hadoop框架
- 《自然·醫學》:首個人類肺細胞圖譜誕生!
- 景聯文科技榮登《2023資料標註公司排行》和IDC中國AI大模型生態圖譜AI大模型
- 詳解:Hadoop生態元件Yarn之長期執行服務支援篇!Hadoop元件Yarn
- 知識圖譜01:知識圖譜的定義
- 事理圖譜,下一代知識圖譜
- 知識圖譜|知識圖譜的典型應用
- hadoop動態摘除節點Hadoop
- Hadoop生態系統應用狀況大調查:網際網路篇!Hadoop
- 大資料實戰之hadoop生態概況和官網文件解讀大資料Hadoop
- 知識圖譜學習記錄--知識圖譜概述
- 圖撲孿生工廠流水線組態圖視覺化視覺化
- IT十年-大資料系列講解之hadoop生態系統及版本演化大資料Hadoop
- 第一章:Hadoop生態系統及執行MapReduce任務介紹!Hadoop
- 數字貨幣生態篇:大變革,數字貨幣生態藍圖(附下載)
- Java學習圖譜Java
- nodejs入門-圖譜NodeJS
- go 知識圖譜Go
- OI知識圖譜
- 手把手 | 事理圖譜,下一代知識圖譜
- 大資料時代下的社交圖譜與興趣圖譜大資料
- Hadoop源生實用工具之distcpHadoopTCP
- 一步一步學習大資料:Hadoop 生態系統與場景大資料Hadoop
- 譜圖論:Laplacian運算元及其譜性質圖論
- 2024 開源資料工程生態系統全景圖
- 華為描繪生態新藍圖:有能有為