資料雲時代,中國的“Snowflake”如何破局?

qing_yun發表於2021-03-29

2020年疫情肆虐之下,得以快速復工復產的基本都是數字化程度較高的企業。這讓我們看到了數字化的價值,同時很多企業也更加感受到轉型的迫切性。

與此同時,推動企業數字化轉型的大資料技術也迎來了新的發展機遇,據IDC 2020年資料,在2020-2024年期間,全球大資料技術與服務相關收益將實現9.6%的CAGR(年均複合增長率),預計2024年將達到2877.7億美元。

去年,Snowflake上市且市值一度超過IBM而備受關注。像呼籲中國的Salesforce一樣,大家都在期待中國的“Snowflake”出現。

軟硬協同兩手抓

“第一次去星環的時候我就說這就是中國的Snowflake。”在日前舉辦的星環科技與英特爾聯合成果展會上,英特爾中國商業銷售生態夥伴及區域市場總經理夏迎麗難掩對星環科技的欣賞,她指出資料越來越多,資料的價值體現一定是一個大資料分析和賦能的過程。

“大資料技術實際上在各個行業當中都在不斷融合,在新基建處於核心位置,加速各行業和企業的數字化轉型。”星環科技創始人&CEO孫元浩曾經強調大資料技術將是企業未來核心競爭力。

星環科技是一家大資料與人工智慧基礎軟體公司,創始團隊有著多年的硬體工作經驗,是更加懂硬體的軟體公司。資料的海量爆發增長對企業資料處理能力提出了更高的要求,硬體與軟體不斷迭代升級,面對越來越複雜多變的業務需求,需要IT系統更加靈活、彈性,擁有更高的效能。

“硬體的效能需要軟體去展現,但是軟體的效能需要硬體去支撐,這是硬軟融合發展的時代。”夏迎麗強調。

相比其它大資料公司,星環科技更懂CPU架構,可以設計出更適合硬體體系的軟體演算法。編譯器技術的經驗,讓星環團隊可以寫出更高效的軟體程式碼,更好地發揮軟硬體優勢。與包括英特爾在內的硬體供應商的深度技術合作,完成應用方案的引數調優,為行業提供最佳解決方案。

星環科技與英特爾從技術交流、產品成果落地、生態合作等方面加強溝通與合作,且收穫頗豐。2019年4月,星環科技作為英特爾公司重要的軟體戰略合作伙伴之一受邀參加了2019英特爾® 創新產品釋出會,會上基於星環科技分散式快閃記憶體資料庫ArgoDB與英特爾公司新一代處理器產品同步推出高效能解決方案。5月,在星環科技主辦的第三屆前沿科技論壇上,星環科技宣佈與英特爾公司達成戰略合作併成立技術創新聯合實驗室。2020年6月,基於星環科技Transwarp ArgoDB的英特爾®精選解決方案入選2020年度英特爾®精選解決方案(Intel Select Solution)。藉助英特爾VPU的強大算力、英特爾®OpenVINO™工具包和英特爾®Media SDK,星環科技Sophon Edge邊緣計算平臺在智慧城市影片監控場景下的不規則行為檢測和識別的計算效率提升了250%。

值得一提的是,在2018年,星環科技成為12年來全球首個完成TPC-DS測試並透過官方審計的資料庫廠商,其中正是英特爾公司的處理器的極速效能助力星環科技登頂資料庫領域的珠穆朗瑪峰。

星環科技與英特爾一直相信合作共贏,大資料時代,產業上下游形成一張更為緊密協同的大網,精細化分工的趨勢更為明顯,“因為沒有一家公司能夠做所有的事情,合作一定是1+1大於2。”夏迎麗指出。

“十四五”規劃指出,要加快數字化發展,建設數字中國:“迎接數字時代,啟用資料要素潛能,推進網路強國建設,加快建設數字經濟、數字社會、數字政府,以數字化轉型整體驅動生產方式、生活方式和治理方式變革。”隨著國家、社會、企業越來重視數字化轉型,星環科技等科技公司迎來了技術創業的好時代。

資料雲四步走

創新、融合與發展是時代前進的主題,也是每個科技企業都要考慮的事情。隨著雲端計算、大資料與AI的不斷髮展,ABC(AI、BigData、Cloud)融合發展已經成為大勢所趨。

英特爾中國雲創新中心技術總監兼大資料首席工程師程從超在會上提出了大資料和雲端計算融合發展的趨勢,指出與傳統的資料湖架構面向專案、以Hadoop為核心、針對流式處理和批處理採用不同處理框架的方式不同,隨著計算、網路、儲存硬體領域中發生的革命性突破、以及雲原生架構逐步步入成熟,人工智慧+大資料+雲端計算的融合架構成為可能。這一技術發展趨勢體現在出現了基於物件儲存的雲上資料湖架構,包括“湖倉一體”的儲存架構和“批流一體”的資料處理架構。

國內新技術的創業大多看國外的對標,Salesforce引領了SaaS的發展,大資料明星企業Snowflake能夠取得如此成功,是雲原生資料倉儲的勝利,此外,美國時間 2021 年 2 月 1 日上午,由 Apache Spark 初始成員創立的大資料初創公司 Databricks 宣佈完成 10 億美元 G 輪融資,Databricks的“湖倉一體”被譽為下一代大資料技術。

國內大資料從2013年開始逐步發展起來,早期更多是一個跟隨者。如今以星環科技為代表的國內企業在技術方面有了長足的發展,在某些方面已經成為創新者,比如2018年星環科技提出資料雲,這也是資料雲在全球首次面市,在高速發展的數字經濟之路上星環們正在尋求“彎道超車”的機會。

星環科技認為資料雲是未來的發展方向,星環 TDC 主要面向企業私有化場景,以資料為中心,打通了資料 PaaS、分析 PaaS、應用 PaaS 三類 PaaS 能力,底層統一基於容器雲平臺構建,可幫助企業解決協作資料分析、資料管理混亂、規範應用開發流程、存量應用治理、資源衝突與效率管理的困難與問題。除此之外,星環 TDC 基於雲原生技術實現了分散式計算與儲存的解耦合,實現計算單元和儲存單元的獨立彈性伸縮,更好支撐有狀態的工作負載,也更能滿足企業與日俱增的資料處理與管理需求。

星環科技一路走來給了業界很多驚喜,這源於其對技術的理解和洞見,不過有時候提前佈局一些新技術也令人不解,“星環科技現在還是不是一家大資料公司?”有媒體採訪孫元浩時問道,“簡單來說,我們是一個資料處理工具的公司,我們把跟資料相關的所有平臺工具全部做完了,其實你看到所有工具都做資料處理的,圍繞資料做的。所以從這個意義上講仍然是個大資料公司,只不過它不光處理大資料,還能處理小資料。而且也能做智慧分析,甚至把資料變成彈性業務,比如說雲化。”孫元浩如此回答。

創始人孫元浩對技術與產業有長期的觀察與思考,他指出資料雲分成四個階段。第一個階段是業務資料化,把資料集中起來進行儲存管理、統計分析。第二階段是資料資產化,把資料治理好以後提供給各個部門甚至外部使用,進行交叉應用,絕大部分企業組織處在業務資料化和資料資產化兩個階段。第三階段是資料智慧化階段,用資料來驅動業務,金融機構部分業務已經到了第三階段。第四階段是資料生態化,要進行資料交易,最大化資料價值。資料生態化才剛剛開始。

走向資料雲的四個階段,每一步都不易,猶如蜀道之難,但有一點可以肯定,直掛雲帆濟滄海時,中國的“Snowflake”一定有自己獨特的面貌。

來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/69925873/viewspace-2765515/,如需轉載,請註明出處,否則將追究法律責任。

相關文章