杉巖資料媒資CDN影片儲存解決方案

一、  方案背景

高畫質、超高畫質影片的蓬勃發展，使用者對高品質影片體驗的渴望，對網路的併發處理和內容平臺的儲存能力提出了更高的要求。作為產業鏈的重要一環，CDN（內容分發網路）進入規範發展快車道。CDN的快速發展將為內容分發平臺的建設和普及提供強有力的支撐。隨著業務的不斷擴充，具備橫向擴充套件、彈性自適應、支撐海量客戶端併發訪問的儲存平臺順應超高畫質影片時代的發展趨勢。

二、  挑戰

1、  傳統儲存無法滿足源站新型業務需求

源站是影片點播平臺的核心內容庫，隨著時間的推移，採購的節目和內容越來越多，儲存需要支撐幾十甚至上百PB的內容，而受限於機頭或者架構，傳統儲存平臺並不能儲存所有內容，且在面臨需要擴容的時候無法實現不停機擴容。

2、  傳統資料保護手段存在安全問題

由於容量、架構限制等問題，傳統儲存往往採用多套儲存來進行資料儲存，且每套儲存只能採用RAID等機制等保障資料安全。由於資料量越來越大，儲存節點越來越多，單點故障等問題凸顯。

3、  傳統儲存無法應對海量使用者端的巨大流量壓力

前端使用者的增長帶來了更高的流量輸出，但傳統模式下後端儲存受限於機頭，儲存的穩定影片流輸出無法透過擴容繼續提升，為了提高使用者觀看體驗，需要CDN和線路等其他環節進行影片流加速處理。

4、  傳統儲存無法支援快速索引和影片後處理需求

傳統儲存不支援索引，不能直接透過索引、快取、流分裂、組播等技術，將內容釋出或投遞到距離使用者最近的服務節點，也無法支援影片的內容分析、內容稽核、智慧生產等影片智慧化處理引擎。

三、  解決方案

CDN影片儲存解決方案提供源站影片資料的統一儲存平臺。透過杉巖海量物件儲存（SandStone MOS）將多臺伺服器上的本地磁碟整合起來，形成一個或多個大規模儲存資源池，透過多副本和故障域的資料安全保護機制，保證資料安全和業務連續性。

CDN是多讀少寫的應用場景，在寫入資料時,儲存將資料切片均勻、冗餘地分佈到不同伺服器的不同硬碟上；在讀取資料時,從多個節點的硬碟同時讀取，提供高頻寬的穩定影片流，同時為了滿足前端多併發的需求，儲存還自帶負載均衡服務，不會出現網路瓶頸和卡頓，保證了高品質影片體驗。

四、  方案收益

l  分散式資料儲存，彈性擴充套件高可靠

採用去中心化的分散式架構,儲存容量可達EB級以上

可按需採購，容量與效能隨節點數增加線性增長

多副本、多故障域等多種安全機制保障資料安全

硬體異常時，啟動自動化快速資料重建機制

l  影片最佳化技術，更快速的影片訪問體驗

大檔案資料切片儲存，提供多節點、高頻寬穩定影片流

儲存節點線上擴容，效能輸出呈線性增長，底層資料自動分佈均衡

影片流量負載均衡，支撐前端海量內容併發讀取

l  影片標籤索引，智慧影片處理

內建影片的內容分析、內容稽核、智慧生產等影片智慧化處理引擎

自動影片標籤處理，更快速、精確地檢索影片

支援與Hadoop、Spark等大資料分析平臺對接

l  高相容性，完美匹配主流CDN平臺

採用標準S3物件儲存協議，可平滑對接至現有支援S3協議的業務系統

提供RESTFul API、控制檯以及多種語言的SDK工具包

提供開發支援服務，支援點播平臺快速改造上線