AI決策進階:深度學習遷移技術賦能決策
作者 | 洪七公
來源 | 鐳射財經(ID:leishecaijing)
現實生活中,我們經常會把一個行業的經驗遷移至另一個相關行業,達到高效學習的目的。在機器學習的演算法中,遷移學習也能實現同樣的效果。基於遷移學習技術,網際網路公司旗下的影片、電商業務場景智慧推薦知識可遷移至廣告、應用程式等其他產品的推薦業務,一些電子產品的使用者評價模型也可用於影片、遊戲等產品的輿情分析中。
產業數字化轉型浪潮迭起,各行各業都需要建立與自身商業模式適配的AI大腦,實現智慧經營、智慧決策。AI決策的應用離不開模型、大資料、演算法的支撐,其中模型的好壞決定智慧決策解決方案的精準度。
人工智慧技術日益精進,目前在建模方法上,深度學習、遷移學習等機器學習技術有機融合,不斷提升AI建模效率,最佳化模型的決策效果。深度學習經過大資料訓練,能快速掌握資料規律,對結果作出預測;遷移學習利用資料和模型之間的相似性,能在不同場域實現知識遷移。二者結合便能為人工智慧向產業加速滲透輸出更多高質量的模型,開啟AI賦能空間。
在技術應用過程中,人工智慧已從傳統的多資料場景延伸到各種業態,這對機器學習提出了新的要求和方向。遷移學習的多工學習、跨領域學習等能力優勢顯露,它在一定程度上消解了傳統機器學習的痛點。DeepMind執行長DemisHassabis 曾公開談到,遷移學習是最有前途的技術之一,有朝一日可能會觸發通用人工智慧的誕生(AGI)。
事實上,正是基於深度學習、遷移學習技術,模型得以實現迭代和輸出,人工智慧才能源源不斷地落地應用,成為產業數字化轉型的智慧基礎設施。深度學習與遷移學習融合加快,通用智慧變革也會接踵而來,這為各類商業場景的智慧化改造帶來可能。
知識遷移,化解建模難題
近年來,越來越多的人工智慧應用從實驗室走進老百姓的日常生活中,藏於應用背後的機器學習也為大眾所知。就機器學習的各個分支發展情況而言,深度學習是當前相對成熟且被廣泛商用的建模方法。例如生物識別、影像語音識別、應用程式中的智慧推薦等。
機器學習在技術上主要基於大量的有標籤樣本和同分佈樣本,從源源不斷的大資料中挖掘規律,根據模型進行預測分析。這也就解釋了為什麼當我們開啟資訊和短影片App時,平臺就推薦與受眾閱讀習慣相符的內容。
不過,強大的機器學習在實際應用中也會遇到資料較少、資料分佈差異的場景,這就催生了機器學習的演進,向遷移學習邁進。遷移學習實質上就是把某個領域已訓練的模型或已學到的知識,遷移到另一個相關領域,提升目標領域的學習效果。遷移學習的核心邏輯在於找到共性與相關性。
儘管領域或任務不同,但場景的相關效能讓模型學到的知識輕鬆輸送給目標領域,實現高效建模,完善模型的科學性。以騎摩托車為例,假如A從未騎過摩托車,他的摩托車經驗空白,但他騎過腳踏車,腳踏車的平衡控制與摩托車相似,那麼他就能利用騎腳踏車的經驗快速學會騎摩托車。這個過程可近似看作遷移學習過程,藉助知識遷移,既能突破少資料、少經驗困境,又能提高學習效率。
除了能應對樣本標籤量不足的問題,遷移學習還能糾正樣本分佈偏移,降低因樣本分佈變化產生的模型失衡。具體來看,遷移學習的多工學習方法可將不同型別的標籤樣本同時建模,豐富模型訓練的樣本量;領域適配法可以把事件樣本遷移到客戶全量樣本上,減少樣本分佈變化帶來的影響,從而在目標領域中建立更加可靠的學習模型。這不僅提升模型訓練效率,還進一步增強AI效能。
演算法迭代,AI決策“破圈”
數字經濟時代,產業創新迭代加快,新消費、新制造、新金融等新商業形態層出不窮,越來越多的新場景面臨小資料、冷啟動問題,基於傳統機器學習演算法就難以為其提供AI決策智慧方案。比如在網上新開一家店鋪,售賣的產品或服務在市場上較為少見,由於缺乏資料,就無法建立合適的模型,對使用者進行智慧推薦。
利用深度學習遷移技術,能夠在小資料的情況下實現模型的搭建。從遷移學習的價值角度來看,主要體現在建模效率和模型最佳化上。一方面,遷移學習能在源域或相似的知識基礎上訓練,快速遷移至新的任務中,無須再去耗費成本採集新的樣本集;另一方面,遷移學習基於資料相關性,擴充套件了樣本集,實現模型的最佳化。
國內一些AI技術供應商紛紛探索遷移學習的技術應用,如薩摩耶雲應用自動多樣本混合器遷移學習,用一個任務開發的模型作為另一個任務模型的起點,從而有效最佳化AI模型,並緩解模型訓練樣本不足帶來的問題,使目標任務達到較好的效能。
在應用場景上,深度學習遷移技術在金融、醫療、零售、智慧城市等場景中具備非常大的業務潛力,尤其是一些新的商業場景,遷移學習演算法可以把已學到的知識分享給新的模型。產業數字化轉型背景下,人工智慧技術從網際網路、金融領域擴充套件到更豐富的業務場景,這也為遷移學習帶來機遇。
目前,機器學習技術已在大量的商業場景中落地應用,幫助企業經營從經驗決策到智慧決策,有效帶動營銷獲客、風險管理、使用者運營管理向智慧化轉型。拿薩摩耶雲來講,其利用深度學習、遷移學習等AI技術,自主研發了端到端雲原生科技解決方案,以SaaS的形式為合作伙伴輸出基於雲的智慧決策服務,幫助客戶實現業務運營智慧化。
無論是演算法的迭代還是模型的最佳化,最終的目標都是基於應用場景實現決策智慧,把對場景的理解透過AI模型形成解決方案。伴隨深度學習、遷移學習等演算法的迭代創新,AI賦能產業的邊界也會得到延伸。
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/69969060/viewspace-2839372/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 科技創新大潮澎湃,AI決策賦能產業高質量發展AI產業
- 品友全面升級集團戰略 AI賦能商業決策AI
- 決策樹學習總結
- 使用 SVM 和決策樹進行整合學習
- 資料升維深挖資訊價值,神經網路賦能AI決策神經網路AI
- 解析丨自動駕駛核心技術:感知、決策與執行(中:決策篇)自動駕駛
- 什麼是技術策劃?應屆生能當技術策劃嗎?
- 如何做出重大技術路線決策?
- 深入淺出學習決策樹(二)
- 深入淺出學習決策樹(一)
- 統計學習方法(二)決策樹
- GBDT(MART)迭代決策樹學習
- weka J48決策樹學習
- 【Python機器學習實戰】決策樹和整合學習(二)——決策樹的實現Python機器學習
- 技術架構師如何制定決策 – Mark Greville架構
- 決策樹
- AI 決策樹判斷黨派AI
- 亞馬遜使用架構決策記錄來簡化軟體開發專案的技術決策 - AWS亞馬遜架構
- 機器學習 - 決策樹:技術全解與案例實戰機器學習
- 決策樹C4.5演算法的技術深度剖析、實戰解讀演算法
- 決策樹模型(3)決策樹的生成與剪枝模型
- Petuum 新研究助力臨床決策:使用深度學習預測出院用藥深度學習
- 機器學習:決策樹機器學習
- 決策樹示例
- 機器學習-決策樹機器學習
- 神策遊戲解決方案:賦能遊戲產業精品化研運升級遊戲產業
- StartDT AI Lab | 智慧運籌助力企業提升決策效率、最佳化決策質量AI
- 如何學習世界首富的思維模型進行日常決策? - shapiro模型API
- IT技術助力於業務流程:RPA解決方案的策
- 從線性模型到決策樹再到深度學習的分位數迴歸模型深度學習
- 《統計學習方法》——從零實現決策樹
- 模式識別學習筆記——貝葉斯決策模式筆記
- scikit-learn學習之決策樹演算法演算法
- 「馬爾可夫決策過程」學習筆記馬爾可夫筆記
- 遊戲AI之決策結構—行為樹遊戲AI
- 資料驅動決策:決策智慧與設計思維
- Python機器學習:決策樹001什麼是決策樹Python機器學習
- 深度學習+深度強化學習+遷移學習【研修】深度學習強化學習遷移學習