強化學習在小桔車服使用者運營中的實踐
桔妹導讀:小桔車服為滴滴旗下品牌,圍繞車主及汽車生命週期,整合運營多項汽車服務,更加智慧更加用心地為車主提供適合的一站式用車服務,致力於讓每一個人擁有輕鬆車生活。
本次分享的主題為強化學習在小桔車服使用者運營中的實踐。在網際網路場景下,面向使用者的營銷是每個業務所對的共同問題,而如何幫助小桔車服運營提升營銷的 ROI 是我們演算法同學的工作重點之一。在本文,我們將向大家介紹如何將車服的營銷問題建模為一個強化學習過程,並且如何精細化地對每個人做出個性化的營銷動作,在實際業務中又取得了怎樣的效果。
1.
小桔車服使用者運營演算法體系
▍滴滴使用者運營演算法模型
流量分發平臺 是對使用者進行場景化廣告的彈出,和使用者進行一些互動,包括髮 push 訊息、播報及發簡訊訊息等各種渠道。 標籤系統 一方面線上上服務中判別使用者的身份屬性、狀態以及身份,另一方面是幫助各業務的運營人員去細粒度的圈選目標人群。
模組一:畫像 包括使用者畫像,商家畫像以及車輛畫像,目標是把生態內的各個實體細粒度的刻畫出來。 模組二:目標人群的定向 使用者運營首先根據任務和使用者生命週期去找到合適的使用者群體,比如對使用者長期價值的定向、對短期的轉化率的預估、使用者流失預警、體系外使用者的精準定向等。 模組三:營銷策略 分兩部分,一個是滴滴體系內線上的一些演算法策略模組,如強化學習、組合策略、個性化推薦,滴滴體系內有大量的拉單司機、專車司機、快車司機、順風車司機以及計程車司機,他們和滴滴平臺有非常緊密的聯絡,每天都在平臺內拉單,使用者行為非常稠密,為智慧營銷提供了豐富的源資料。另一部分是滴滴體系外的使用者增長,如社交營銷、DSP 外投廣告。 模組四:觸達最佳化 演算法根據使用者的狀態和行為發放給使用者一張一定面額的優惠券或一個活動提醒,為了增強使用者的轉化意願,在觸達最佳化階段對使用者進行個性化的訊息提醒。因為平臺業務眾多,各業務下的運營活動眾多,為了避免無節制地把所有的活動訊息在很短的時間內推送給同一個人,需要做一些取捨,這就是全域性流量最佳化解決的問題:在儘量減少打擾使用者的限制下,提升平臺的收益
▍滴滴人工運營的痛點和解決檔案
2.
智慧營銷建模方法
▍強化學習
▍Double DQN 演算法流程
3.
效果展示
▍強化學習演算法效果
拉新成本對比和召回成本對比
▍Graph embedding 個性化訊息提醒效果
本文作者 ▬ 劉 凱 滴滴 | 高階演算法專家 博士畢業於中國科學院自動化所。做人低調,做事高調。以第一作者發表了多篇頂級國際學術雜誌和會議文章,深耕於個性化推薦、效果廣告、智慧營銷等相關領域。
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/69908606/viewspace-2666555/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 強化學習在美團“猜你喜歡”的實踐強化學習
- 強化學習在美團「猜你喜歡」的實踐強化學習
- 羅蘭貝格:車企使用者運營實踐洞察報告
- 騰訊雲Kafka海量服務自動化運營實踐Kafka
- 質量運營在智慧支付業務測試中的初步實踐
- 在 Google Colab 中快速實踐深度學習Go深度學習
- 實時營銷引擎在vivo營銷自動化中的實踐 | 引擎篇04
- 人,才是強化學習在真實世界中面臨的真正挑戰強化學習
- 強化學習在金融市場中的應用(上)強化學習
- 『改良版青桔單車』微信小程式微信小程式
- 【強化學習】強化學習的基本概念與程式碼實現強化學習
- 在不同的專案管理實踐中,如何提高運營效率和創收?專案管理
- 機器學習在高德使用者反饋資訊處理中的實踐機器學習
- 使用者運營是什麼?使用者運營到底在運營什麼?
- DeepMind用元強化學習框架探索多巴胺在學習過程中的作用強化學習框架
- AI在汽車中的應用:實用深度學習AI深度學習
- 【PWA學習與實踐】(5)在Web中進行服務端訊息推送Web服務端
- 活動運營自動化平臺實踐
- 深度學習在高德駕車導航歷史速度預測中的探索與實踐深度學習
- 【直播預告】Greenplum在運營商領域的HTAP實踐
- 深度學習在搜尋業務中的探索與實踐深度學習
- 在學習中運用類比
- 存量使用者運營企業微信的“使用者端小程式”優化方案優化
- 【PWA學習與實踐】(6) 在Chrome中除錯你的PWAChrome除錯
- 機器學習在滴滴網路定位中的探索和實踐機器學習
- 車輛動力學模型在模擬測試中的應用實踐模型
- 深度強化學習的人工智慧在遊戲中的運用:遊戲AI入門及AI優化指南強化學習人工智慧遊戲AI優化
- 深度強化學習在時序資料壓縮中的應用強化學習
- 強化學習-學習筆記14 | 策略梯度中的 Baseline強化學習筆記梯度
- 新媒體運營需要學習嗎?新媒體運營實戰
- vivo前端智慧化實踐:機器學習在自動網頁佈局中的應用前端機器學習網頁
- 深度學習、強化學習核心技術實戰深度學習強化學習
- 強化學習強化學習
- 深度學習在美團配送ETA預估中的探索與實踐深度學習
- 強化學習在e成科技人崗匹配系統中的應用強化學習
- 實時增量學習在雲音樂直播推薦系統中的實踐
- 強化學習-學習筆記13 | 多智慧體強化學習強化學習筆記智慧體
- 決策樹在機器學習的理論學習與實踐機器學習