2024年6月21日,在華為開發者大會2024(HDC 2024)上,華為常務董事、華為雲CEO張平安正式釋出盤古大模型5.0,在全系列、多模態、強思維三個方面全新升級;張平安還分享了盤古大模型在自動駕駛、工業設計、建築設計、具身智慧、媒體生產和應用、高鐵、鋼鐵、氣象等領域的豐富創新應用和落地實踐,持續深入行業解難題。
此外,華為諾亞方舟實驗室主任姚駿、華為雲CTO張宇昕分別就盤古大模型5.0技術解密和華為雲全棧系統性創新發表主題演講,詳細解讀華為雲在AI領域的全棧創新優勢。
盤古大模型5.0,在全系列、多模態、強思維三個方面做了全新升級
全系列:盤古大模型5.0包含不同引數規格的模型,以適配不同的業務場景。十億級引數的Pangu E系列可支撐手機、PC等端側的智慧應用;百億級引數的Pangu P系列,適用於低時延、高效率的推理場景;千億級引數的Pangu U系列適用於處理複雜任務;萬億級引數的Pangu S系列超級大模型能夠幫助企業處理更為複雜的跨領域多工。
多模態:盤古大模型5.0能夠更好更精準地理解物理世界,包括文字、圖片、影片、雷達、紅外、遙感等更多模態。在圖片和影片識別方面,可支援10K超高解析度;在內容生成方面,採用業界首創的STCG(Spatio Temporal Controllable Generation,可控時空生成)技術,聚焦自動駕駛、工業製造、建築等多個行業場景,可生成更加符合物理規律的多模態內容。
強思維:複雜邏輯推理是大模型成為行業助手的關鍵。盤古大模型5.0將思維鏈技術與策略搜尋深度結合,極大地提升了數學能力、複雜任務規劃能力以及工具呼叫能力。
過去一年中,盤古大模型持續深耕行業已在30多個行業、400多個場景中落地
重塑自動駕駛
盤古大模型5.0透過創新的可控時空生成技術,結合場景影片生成、4D BEV影片生成、自動駕駛模擬庫及路網資訊,能更好地理解物理規律,大規模生成和實際場景相一致的駕駛影片資料,還可以靈活增加控制條件,生成不同路況、不同光照、不同天氣的訓練影片資料,加速自動駕駛技術的快速成熟。
重塑工業設計
以新車造型設計為例,週期一般需要1-2年,盤古大模型可以讓汽車的造型設計時間大幅縮短。造型設計師可以將自己的靈感,透過對話、畫圖與大模型互動,生成3D汽車數字模型,並可進行風格化調整、零部件編輯、顏色更換等。盤古大模型生成的數字模型還可直接輸出成3D檔案,支援10幾種主流格式,設計師可以直接3D列印成樣品,減少製作油泥模型的輪次,極大地節省成本和時間。
除了汽車造型設計,盤古大模型還可以用於汽車的工裝設計、模具設計,以及電子產品領域的工業設計等。
重塑建築設計
基於盤古大模型的可控生成能力,只需輸入設計的黑白草圖,即可生成彩色並帶有紋理的建築群360°實景影片;基於盤古3D重建能力,還可以構建出高真實感的建築3D模型,將複雜建築群的概念設計週期從數週縮短到數十分鐘,助力建築師創造出更加出色的建築作品。
重塑具身智慧
盤古大模型能夠讓機器人完成10步以上的複雜任務規劃,並且在任務執行中實現多場景泛化和多工處理。同時盤古大模型還能生成機器人需要的訓練影片,讓機器人更快地學習各種複雜場景。
重塑媒體內容生產和應用領域
盤古大模型能夠將實拍影片快速轉換成特定風格的動漫,並保持角色樣貌特徵前後一致,舞蹈、武打等大運動軌跡也能確保合理一致的視覺效果;能自動將影片譯製成不同語言,並保留原始角色的音色、情感、語氣;將譯製配音、動漫生成等場景的製作週期從月級縮短到天級,大大提升製作效率,作品一次拍攝多元化製作,實現價值最大化。
還能透過AI翻譯和擬人化語音合成能力,實現AI同聲傳譯,讓雲會議、視訊通話等可以實現母語交流體驗。
重塑高鐵
全國每天需要檢測的動車大概有3.2萬節車廂,過去需要大量的巡檢工人在凌晨時段去完成,耗時耗力。如今結合盤古大模型和巡檢機器人,可精準識別一列動車的3.2萬個項點,覆蓋8大類、350多種複雜故障,幫助高鐵提升運營效率,降低成本,減少人工在凌晨時段去巡檢的艱辛作業。
重塑鋼鐵
以上海寶武鋼鐵熱軋生產線為例,每次調整生產鋼板的種類和尺寸,都需要工程師重新調整7道精軋機組的300多個引數,需要耗費約5天的時間。盤古大模型能夠對最優引數進行預測,顯著降低熱軋生產線調優時間,並提高預測精度和鋼板成材率。目前盤古大模型目前已在寶鋼1880熱軋生產線上線,預測精度提高5%以上,鋼板成材率提升0.5%,預計每年可以多產鋼板2萬餘噸,年收益達9000餘萬元。此外,盤古大模型還將應用於高爐場景,對爐溫、鐵水溫度、矽含量等爐況進行模擬,從而輔助高爐精準控制,充分利用每一分能源,降低能源成本。
重塑氣象
華為雲聯合深圳市氣象局,在解析度為25公里的全球模型基礎上,融合區域高質量氣象資料集,升級了解析度分別為1公里、3公里、5公里的區域預報能力,包含氣溫、降雨、風速等氣象要素。不僅如此,今年華為雲還聯合天融環境打造了環境大模型,將汙染六項的預測準確度全面提升10%以上。
重塑醫藥
天士力基於盤古大模型打造“數智本草大模型”。一方面基於盤古的L0基礎模型,學習訓練了4000多萬篇文獻,尤其是學習了1000多本古籍,從古方古籍和現代文獻中總結出知識和經驗,可以賦能方劑篩選和最佳化、提升研發效率,也能輔助醫生問診。另一方面,天士力在盤古17億化合物的藥物分子大模型基礎上,增訓了350萬天然產物分子資料,未來有望更好地最佳化方劑和發現新藥。
華為雲對昇騰AI雲服務進行持續最佳化。業界萬億引數模型訓練的平均無中斷時長約2.8天,昇騰AI雲服務可實現40天無中斷;業界平均叢集故障恢復時間約60分鐘,昇騰AI雲服務可以縮短到10分鐘,同時能將大模型的資源開通時間從月級縮短到天級,加速大模型的開發。
目前昇騰AI雲服務已全面適配行業主流的100多個大模型,以雲服務的方式協助客戶開發,訓練,託管和應用模型,打造百模千態的“黑土地”。
華為雲CTO張宇昕表示,透過全棧系統性創新,能夠讓大模型的資料準備、訓練、推理、應用實現全流程的高效率和高效能。華為雲的全棧系統性創新覆蓋了資料中心、雲平臺架構和基礎設施服務,為AI開發提供AI Native的基礎設施。
當前雲平臺在大模型的訓練和使用中通常存在“算力牆”“記憶體牆”“能效牆”等問題。為此,華為雲打造了下一代的雲基礎設施CloudMatrix,改變傳統資料中心的架構和算力供給模式,將傳統的以CPU為中心的主從架構,演進為多元算力對等全互聯架構;並透過高速網際網路絡協議,將CPU、NPU、GPU等算力資源全部互聯和池化,從而把AI算力從單體算力演進到矩陣算力,開啟智慧算力新紀元。
同時,針對雲平臺在大模型的訓練和使用中存在的“記憶體牆”問題,華為雲正式釋出EMS彈性記憶體儲存服務,基於Memory Pooling專利技術,透過視訊記憶體擴充套件、算力解除安裝、以存代算等三大手段來打破記憶體牆,釋放極致算力。
基於新一代雲基礎設施和EMS彈性記憶體儲存服務、昇騰AI雲服務等創新,華為雲已經在貴安、烏蘭察布和蕪湖,構建了三大AI算力中心CloudOcean;同時也在華北、華東、華南等熱點區域部署了AI算力資源池CloudSea;還透過華為雲CloudLake和CloudPond邊緣雲平臺,將AI算力推到客戶身邊,提供最低時延的AI訓推服務。由此,華為雲打造了雲、網、邊、端協同的AI Native的算力平臺,提供給開發者、客戶和夥伴使用。
盤古大模型也是基於華為雲的AI平臺開發。會上,華為諾亞方舟實驗室主任姚駿從資料高效、引數高效和算力高效三個方面介紹了盤古大模型5.0的訓練過程。
同時,華為雲對AI開發生產線ModelArts進行升級,在AI開發基礎設施和流水線之上,構建了大模型即服務平臺ModelArts Studio,提供百模千態的第三方大模型託管服務,支援對大模型定製開發,並提供相應的工具和行業整合套件,讓客戶可以方便地將大模型與業務系統結合。
除了系統性創新,華為雲還將盤古大模型和華為在產品研發、資料治理、安全防護、業務運維等各個領域積累的資料和經驗相結合,“跳了自己的降落傘”,應用在了華為雲CodeArts、DataArts、MetaStudio和GaussDB、雲安全等系列雲服務的智慧化上。將華為雲的服務重塑和升級,從而更智慧、更高效。
軟體開發:華為雲透過結合AI Agent能力,將CodeArts軟體開發生產線從單點智慧升級到專案級智慧,大幅提升了問題定位率和專案級問題修復成功率,讓開發者能輕鬆實現專案級智慧。
資料治理:華為雲將盤古大模型和華為多年資料治理經驗相結合,讓不熟悉IT技術的業務人員、管理人員可以透過自然語言互動的方式,快速獲取需要的資料,形成視覺化的圖表,直接高效地管數、用數。
數字內容生產:華為雲將盤古媒體大模型和華為有著深厚積累的音影片編解碼、3D模型物理模擬、圖形渲染等引擎能力相結合,一起用於AI內容生成。這樣生成的數字內容更符合物理世界的規律,並且可以實現任意時長的實時互動,突破了當前AIGC的侷限。
資料庫:華為雲將產品文件、專家知識、運維經驗等資料庫專業資料和大模型相結合,構建盤古資料庫大模型,讓GaussDB資料庫在開發、測試、遷移、運維等全生命週期實現智慧化,顯著提升開發人員和DBA的使用效率。
安全:華為雲打造了面向安全領域的盤古安全大模型,能夠快速、精準地給出安全治理諮詢的專業意見,讓企業安全更加智慧。
華為雲是華為公司面向開發者的統一底座,目標打造昇騰、鴻蒙、鯤鵬、GaussDB、尤拉等各項根技術的生態,給廣大開發者一個更優的選擇。
專屬開發空間:為了讓開發者更好地學習和使用這些技術,華為云為每個新生態的開發者免費提供一臺雲主機、一套開發工具和5GB的雲端儲存空間。
專利和科技交流社群:華為在Chaspark網站上提供了開放的專利搜尋工具-查思專利,開發者可以免費查詢到全球近1.9億件專利資料,與華為共同進步與成長。
開發者佈道師計劃:未來3年計劃發展超過3000名華為開發者佈道師。
技術創新要和行業場景需緊密結合才能真正實現深耕行業,華為雲派出500+技術專家深入行業,瞭解客戶需求,解決行業難題。
張平安強調,一直以來,華為雲盤古大模型都堅定地聚焦行業,在解難題、做難事的道路上不斷攻堅克難,砥礪前行,重塑千行萬業。華為雲將與所有的客戶、夥伴和開發者一起,創新不止,攀登不止,讓雲無處不在,讓智慧無所不及,加速千行萬業的智慧升級。
點選關注,第一時間瞭解華為雲新鮮技術~