鑿開資料冰層,透出智慧時代的光:華為雲與開發者的結伴旅行

naojiti發表於2022-06-15

1925年,蘇聯經濟學家康德拉季耶夫在《經濟生活中的長波》中,提出了經濟歷史以50-60年週期波動的理論——這就是著名的康波週期。康波週期認為,科技是社會生產力發展的根本動力。一個新週期的開始必將以技術變革為起點。

幾年以來,伴隨著全球經濟不確定性增加,供應鏈風險加強,以及疫情帶來的打擊,越來越多的聲音開始討論我們是否已經處在一個康波週期的尾聲,全球經濟將不可避免地陷入衰退。同時也有樂觀者提出,一個週期的結尾是另一個週期的開始。尋找能啟動新增長週期的關鍵技術才是消解困境的唯一方式。而啟動新週期的鑰匙,就掌握在那群每日研究AI、雲端計算、大資料的開發者手中。

從嘗試飛行的萊特兄弟,到拉下交流電閘刀的特斯拉,再到矽谷車庫裡研究計算機的少年們,每一次改變世界的技術發明,其實都是從一些細小但勇敢的開發創新開始。只要有足夠的條件,總會有一位或者很多位開發者站出來,用技術的光亮再次照耀世界。

但前提,是需要更多人為他們創造充足的條件。

在新技術還有待磨礪的時候,開發者的工作其實並不好做。很多極具創意與膽識的開發者,都被無盡的重複工作與高企的開發成本拖垮了夢想。比如說,我們都知道有一句話:中國的人口紅利將轉化為善於通盤應用資料,未來得資料者得天下。

但真要處理資料,以資料驅動智慧化、數字化落地的時候,開發者卻可能面臨海量技術無從下手。茫然無措的他們,又怎麼去改變世界呢?

華為雲剛剛給出了一些最新答案。6月15日,在“華為夥伴暨開發者大會2022”上,華為雲 CEO 張平安帶來了“共創新價值,一切皆服務”主題演講,併發布一系列創新雲服務:在經驗即服務方面,釋出了最新的行業 aPaaS 和基礎 aPaaS 服務,加速實現行業 SaaS 創新;在基礎設施即服務方面,將釋出“全球一張網”的最新部署進展和出海扶持計劃。在技術即服務方面,釋出全新的資料治理生產線,以及數字內容、AI 開發、軟體開發生產線的升級服務。

這些創新雲服務,可能每種都值得仔細聊聊,但礙於篇幅不免顯得籠統。我們不妨就從各個領域,各個平臺的開發者都會面臨的問題:如何應對資料工作,如何降低資料開發與治理成本說起,聊聊華為雲給開發者們的準備的禮物。

開啟華為雲的行囊,開發者會發現裡面赫然躺著一條條“生產線”。

如果一個人,一個團隊的力量有限,那一條甚至幾條生產線的效率與能量或許就足夠去改變些什麼。

如果開發很難,就讓它變得簡單。

如果資料、AI、數字人,這些技術與開發者們之間還隔著冰層。那就鑿透它,讓資料飛馳,讓開發有光。

“第三種資源”:當資料成為新的生產要素

讓我們先來說說資料這東西的重要性。

今天,我們依舊可以非常確定地說,資料流將是未來企業在水流、電流之後的第三種必須接入資源。就像一家企業不會找一個沒電不通自來水的辦公室一樣,企業也不會放棄在資料流中尋找價值。

近兩年,從央行釋出的各種報告到經濟界的各種推演,都顯示出中國市場的人口紅利正在消失。而想要應對這種局面,根本解決方式是構建新的生產函式。充分發揮資料價值,在海量的生活資料、產業資料中尋求生產力的持續突破。從“東數西算”工程到十四五遠景規劃中提出數字中國建設,無不展示了資料在未來發展中的價值。

資料之所以如此重要,是因為它可以成為一種全新的生產要素,而不必依賴其他各種各樣的農業、工業生產基礎。由這種生產要素啟用出的經濟形態,就是我們常說的數字經濟。更具象一點來看,資料可以在三重價值中幫助一家企業啟用增長爆發力。

1.自我透視:根據自身資料最佳化重整業務,從而提升產業合理性,降低生產成本。

2.尋找機遇:根據內外部資料結合,找到市場空間與市場闕值,準確創造商業價值。

3.培育智慧:資料是AI技術的基礎養料。有效將資料與AI結合,可以提升企業的智慧化水平,全方位迭代生產關係。

資料的重要性越來越高,讓資料相關的開發工作與越來越多樣、複雜,開發者的商業機會越發多元。但開發者卻很有可能並未從中找到時代紅利,因為資料開發這項工作,實在是太“痛苦”了……

總是打出枯井:真實的資料開發並不美好

修路和打井是現實生活中的兩個難點,往往費盡千辛萬苦,卻打出了一口枯井,怎麼也找不到水源。

對於開發者來說,上雲或許就是修路,而資料治理就是挖井。面對繁雜、龐大,且非結構化的資料,開發者需要完複雜且高重複性的資料治理工作,而最終得到的資料價值還很難估量。如果我們注意過企業的IT崗位招聘啟事,會發現資料工程師很可能是薪資待遇偏低,但人數需求很大的崗位。原因就在於資料篩選、資料清理等工作重複度高,勞動時間長,產出價值卻充滿不確定性。另一方面,資料治理的步驟環節又很多,每個環節需要不同的軟體工具。這導致資料開發很難實現自動化,依舊需要依賴人力。

而一旦涉及“資料+AI訓練”的新技術組合,企業又可能面臨另一個難題。深度學習演算法的黑盒性強,訓練結果差異大,資料加工步驟眾多。這又導致相關崗位的技術門檻被堆高,往往需要高水平的演算法架構師來解決並不複雜的資料問題。最終導致業務價值可能無法抵消人力成本。

現實中細碎、複雜的資料治理工作,導致開發者很可能擁有這樣或那樣的資料,最終卻打出的都是枯井。甚至僅僅是在統一資料標準,剔除無效資料等基礎工作中就浪費大量時間。基礎的資料治理,往往會佔據整個專案80%以上的人力與工作時間,最終導致整個專案難以按時交付。

這種“人拉肩抗”式的資料開發與資料治理,最終導致很多開發者團隊望資料而興嘆,又讓很多具有高價值資料資產的行業,無法找到技術合作夥伴,數字化難以推進。

想要改變這種尷尬的現狀,可能必須要從資料開發工作的技術手段著手。用更先進、可靠的自動化技術,替代傳統意義上流程繁瑣、步驟冗長的資料開發。

最佳狀態,是資料開發工作能夠擁有“生產線”那樣流水作業的效率與氣勢。

江河飛馳:把資料開發變成“生產線”

千萬不要低估“生產線”這三個字所蘊含的能量。1913年,福特建立了世界上第一條生產流水線。之後短短10年,生產線模式就傳播到世界各地。二戰期間,美國能夠源源不斷生產物資,滿足盟軍龐大的物資需求,核心原因之一就是美國擁有當時最完美、數量最多的工業生產線。換個角度看,一種生產行為可以轉化為生產線,也是其真正走向成熟的標誌。

資料治理這項讓所有開發者一聽到就頭疼的工作,也終於迎來了走向“生產線”的一天。去年,華為雲就已經面向開發者與夥伴釋出了三大生產線服務。而今年又推出了全新的生產線服務——資料治理生產線DataArts。它能夠幫助企業更便捷高效地管理和使用資料,釋放資料價值。

DataArts的工作原理正是它的字面含義。它就像生產線一樣,把海量的複雜的無序的資料生產成為清潔透明高質量的資料能源。與以往各個環節需要使用不同的工具與開發軟體不同,DataArts提供一站式平臺,實現從資料入湖、資料準備、資料質量、到資料應用等全流程的資料治理。這樣一來,資料工程師將不再需要一批批,手工作坊式地進行資料清洗、篩選、入庫,而是可以將資料來源源不斷匯入,再持續生產出高質量可應用的資料。如果說以前的資料治理,是隔山跨海去挑水,那麼DataArts就實現了擰開就有的自來水。

同時,DataArts還融合了智慧化的資料治理能力,在多個層面幫助開發者大幅提升效率。比如在資料準備環節,DataArts可以讓開發者不用花時間去重複編寫大量SQL指令碼,像操作Excel一樣簡單完成資料的清洗、查重、匯聚等工作,讓原本需要幾天才能完成的開發工作縮短到幾小時。

資料工作的另一個要點是安全,為了保護企業的資料資產價值。DataArts擁有全鏈路資料安全管理,可以很好地保護隱私資料,對資料使用進行合規性審計;同時也能夠幫助企業沉澱資料資產,發揮資料價值,實現業務創新。華為內部已經基於DataArts生產出10W+高質量的資料資產。在華為外部,DataArts服務了1000家以上的政企客戶,每天有千萬級資料任務在雲上DataArts執行。

我們可以從一個案例中直觀感受到DataArts的價值。從2019年開始,帆軟聯合華為雲的資料治理解決方案已經服務了近200家制造業客戶。在信義玻璃專案中,帆軟透過華為雲的資料治理生產線,整合各類IT系統資料以及超過數十萬點位的生產裝置和生產工藝資料,進行高效的資料處理,建立了企業級資料目錄,進而幫助信義玻璃達到經營資料視覺化、可分析、可預測,風險可預警,使經營報表生成時間從過去的一週縮減到一小時。同時透過能耗和工藝資料的視覺化,使產線能耗大幅改善,每年節省費用數千萬人民幣。

或許這才是開發者和企業使用者應用的樣子:讓人更加篤定安然,讓資料如江河般飛馳。

數智合流:開發者的旅程應該有光

或許我們可以再深挖一下這個話題。面向資料時代,面向新一代資訊科技帶來的歷史機遇,我們期待的開發者應該是什麼樣子的?

至少,開發者的工作不應是這樣的:

面向AI的新技術和新市場,開發者學不會技術,找不到合適的開發平臺,從訓練到部署全是槽點;

面向日益增多的資料治理與應用需求,開發者需要疲於奔命地工作,還不知道最終清洗出的資料能否符合標準;

面向產業智慧化的趨勢,算力變成了開發者難以承受的成本,最終讓夢想付諸東流。

想要解決這些問題,讓開發者聚焦於創新創造,就應該清掃掉他們前進路上的那些成本、技術、人力、平臺等等障礙。讓開發者的旅程充滿光,而不是遍地陰霾。

開發者需求的光,是效率,是低門檻,是工具化標準化,是把最先進的技術與最簡單的開發融為一體。這也是華為雲正在做的事:透過將長執行緒的開發工作變成高度自動化的生產線;再將多條生產線組合在一起,形成數智合流的理想開發狀態。

這是因為,未來的ICT開發與生產邏輯,一定是以資料作為新型生產資料,以智慧作為驅動資料的手段,最終形成新的生產力。為此,華為雲不僅釋出了資料治理生產線,同時也在AI技術、低門檻開發等領域繼續升級,打造了多條生產線合圍而成的高效率、低門檻、高技術淨值式開發。

華為雲在去年釋出AI開發生產線ModelArts的基礎上,今年又升級了AI應用開發框架ModelBox,以此來解決AI應用開發者平均需要大量時間進行晶片和系統適配的難點,實現了AI應用一次開發,全場景部署,將跨平臺開發適配週期縮短80%,將推理效能提升2-10倍。

軟體開發生產線DevCloud也進行了升級。最新發布的華為雲桌面IDE CodeArts可以為開發者提供隨時隨地的線上程式設計體驗,能夠快速連線 220 多個華為雲服務和 4500 多個華為雲 API,讓開發更便捷;同時 CodeArts 提供了智慧程式碼搜尋和全量程式碼補全功能,以及開放的外掛標準和外掛市場,讓開發更高效,生態更開放。

此外,面向越來越旺盛的數字人需求,數字內容生產線 MetaStudio釋出了數字人生成服務,僅需 5 秒鐘就可根據使用者上傳的照片,生成自己專屬的 3D 數字人。

越來越多的開發需求,正在走向生產線模式。開發者們可以從小作坊式的敲敲打打,夜以繼日的疲憊工作中走出來,走向工業化的流水線運轉,走向新技術為我所用的創造時代。

更簡單,更高效,更智慧,這就是開發旅程中的光。

“生產線”背後的雲之迭代:智慧世界,一切皆服務

華為云為開發者準備的一條條生產線背後,是名為“技術即服務”的戰略構想。這些生產線的本質,是華為雲在AI、資料、軟體開發等領域積累的前沿技術,透過平臺化、工具化的方式進行外放。先趟過開發者需要過的河,用華為雲的技術能力去解決開發者單打獨鬥難以解決的問題,最終讓開發者站在華為雲鋪好的技術之路上,向未來飛馳。

顯然,這樣的價值對接是在傳統意義上的雲端計算市場中很難看到的。雲端計算提供的基礎是按流量付費的存、算資源,進而開始向SaaS代表的雲上服務延展。雲端計算開始從單一的基礎設施功能,向點對點的軟體服務功能轉變。

那麼更進一步呢?雲端計算承載著開發者、企業使用者的業務與資料,當然可以為他們帶來更多。比如是否能在雲平臺上,將已經成熟的開發模式帶給開發者?是不是可以基於公有云輸送對前沿技術的理解與同步應用?是不是可以用雲作為出海動力,完成生態化的海外市場擴充?

這些構想,是將雲端計算的價值模式進行又一次迭代。從SaaS代表的點對點價值交付,變成多樣性的立體化價值交付。在新的雲端計算市場邏輯中,廠商將透過多種方式向開發者、合作伙伴、使用者輸送價值,竭盡所能滿足各個角色在生態中的需求。而各個角色又在統一的平臺與技術能力下相互創造價值,不斷遞增產業機會,相互激發產業空間。

這種把技術、經驗、基礎設施都化為市場服務一部分的戰略,被華為雲稱為——一切皆服務。

一切皆服務的孕育與成型,或許可以視作對雲端計算市場底層邏輯的一次迭代。雲端計算服務商與使用者、開發者之間的交流介質不再是簡單的用雲量,也不是某種技術的使用頻次,而是以技術、基礎設施為起點,思考開發者、使用者的大量需求。多個角色共同進步,共同面對和解決一系列問題。

這次雲之迭代,或許可以解決開發者長期面對的“頭疼醫頭,腳疼醫腳”問題。雲的角色不再是一位售賣者,而是一個與你一同想問題,創造價值的朋友和夥伴。

一朵屬於未來的雲,或許應該是這樣的——

在技術優勢、基礎設施投資、數字化經驗等領域,與開發者和夥伴共享一切價值

在包容度,關注度上讀懂使用者,讓服務滲透一切需求

透過技術創新、生態締造、密集合作,與開發者、合作伙伴、企業使用者一道努力,抓住一切機會。

為了那些光,為了那些飛馳的資料,為了那些奔流的智慧。

首先,那朵雲要為賦能開發者,儘可能付出一切努力。

來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/31561483/viewspace-2900824/,如需轉載,請註明出處,否則將追究法律責任。

相關文章