最近因為做了些和hadoop相關的專案(雖然主要是運維),但是這段經歷讓我對hadoop的實際運用有了更加深入的理解。
相比以前自學hadoop,因為沒有實戰場景以及良好的大資料學習氛圍,現在回顧下的確相當膚淺。
因此我要好好重學下hadoop,短期計劃如下:
1.重學HDFS知識
2.重學mapreduce,包括老版的mr以及新的yarn
3.學習hive和pig
4.學習hbase
5.以上學習都是通過理解其架構原理為目的,最後結合大型網站架構裡儲存的問題,進一步完善關於解決儲存瓶頸的知識。
最近的學習讓我發現hadoop技術是一個完美的分散式系統的學習案例,它的設計思想也是大型網站架構的核心思想之一。
希望等出差回去武漢一個月左右時間完成這個新的學習計劃,給自己鼓個勁,加油!!!