構建大資料平臺的必要性

　　大資料平臺統一管理、集中儲存大資料資源，滿足高併發，海量資料對高效能運算能力和大容量儲存能力的需求，提供資料採集，資料計算，資料儲存，資料分析，資料視覺化等大量開放能力，確保各系統之間資料的互聯互通和共享，為資料的全鏈條透明化、運營決策的高度智慧化提供依據，儘早建立大資料平臺具有重要意義。

　　構建大資料平臺的必要性

　　大資料平臺承載所有資料的管理，為上層應用提供資料支撐。傳統的開發模式中，各個應用開發獨立進行，各自沉澱自己的資料。各個應

　　用的資料缺乏整合，形成資料孤島，後續無法沉澱資料資產。同時，因為沒有一個統一的大資料平臺，各個應用都會有自己的資料儲存和計算體系，存在大量的重複建設。

　　以資料中臺為核心的上層智慧應用的開發，離不開大資料平臺的支援。大資料平臺提供統一的資料資料儲存，計算能力。上層應用不需要再重複開發，只需要使用資料中臺提供的能力。同時，多個上層應用的資料也集中沉澱到一起，形成有效的資料資產。

　　大資料整合子系統

　　大資料平臺需要提供資料採集能力，完成從傳統資料庫到大資料平臺的資料採集，包含批量採集和基於流處理的實時採集，平臺提供如下能力：

　　批量資料採集：大資料平臺支援資料批量採集，對於大量、實時性要求不高的資料適宜採用定時執行批量採集。

　　實時資料採集：對於實時性要求較高的資料，支援實時資料採集的方式，保障平臺資料及時性。

　　網際網路資料採集：網際網路的資料採集方式主要以頁面文字或文件形式的資料為主，為了相容不同型別的網際網路輸入方式，一般先將資料進行流式資料清洗後，再送到搜尋引擎或者其他資料庫中。

　　構建大資料平臺的必要性.中琛魔方大資料平臺表示表示無論是大資料平臺的流程，還是業務分析平臺的建設，必須要注意保證平臺的效能：大資料分析平臺的效能一定要保證高效，在資料量激增的情況下可以支撐海量資料分析。