如果說十年前,王堅創立阿里雲讓雲端計算在國內得到了普及,那麼王堅帶領團隊自主研發的大資料計算平臺MaxCompute則推動大資料技術向前跨越了一大步。
資料是企業的核心資產,但十年前阿里巴巴的算力已經無法滿足當時急劇增長資料量的需求。基於Hadoop搭建叢集是當時解決大規模資料計算的主流方案,Hadoop生態已經比較成熟,而且在規模上也可以解決當時阿里遇到的效能瓶頸。但剛加入阿里的王堅卻另闢蹊徑,決定自研一個大資料計算平臺,也就是今天的MaxCompute。
但王堅看到,當時淘寶的業務還在快速增長,如果用Hadoop搭建的計算平臺會再次遇到挑戰,更別提為外部企業提供算力。
也正是因為這一堅持,才有了今天EB級的大資料計算平臺MaxCompute。過去十年,MaxCompute打破了多個記錄:2013年,突破了單叢集內5000臺伺服器同時計算的侷限,如今單叢集已超過1萬臺的規模;2015年,打破計算界奧運會SortBenchmark的4個世界紀錄,用不到7分鐘便完成了100TB的資料排序,重新整理了ApacheSpark 23.4分鐘的紀錄;2017年成為全球首個100TB規模Bigbench測試通過的大資料計算平臺。
如今MaxCompute已經成為眾多企業和機構算力的來源,為眾安保險、墨跡天氣、協鑫光伏、千尋位置、華大基因、人人車等各行業企業數字化轉型提供了強大的算力。例如,墨跡天氣使用MaxCompute後,開發效率提升超過5倍,儲存和計算費用節省了70%,每天處理分析2TB的日誌資料,更高效的賦能其個性化運營策略;此外,MaxCompute還支撐城市大腦自動指揮城市路口訊號燈,並且成功應用於杭州、澳門、吉隆坡等國內外多個城市的交通治理。
從全球範圍來看,擁有自研大資料計算平臺的科技公司也只有阿里雲、Google和亞馬遜幾家。但倘若當初沒有王堅的堅持和遠見,恐怕今天許多網際網路公司,也難以享受到MaxCompute帶來的紅利。
本文為雲棲社群原創內容,未經允許不得轉載。