AI說,它可以把你變成個遊戲 | 3D人體模型 · CVPR

量子位發表於2018-04-18
三維栗子 發自 凹非寺 
量子位 報導 | 公眾號 QbitAI

640?wx_fmt=gif&wxfrom=5&wx_lazy=1

 死亡效應2

搭建3D人體模型,早已是AI駕(le)輕(bu)就(si)熟(shu)的一項工作,不論是在VR裡,電影裡,還是時尚圈。

不過,執行這項任務一般需要裝備特殊的攝像頭,用來檢測深度,或者從多個視角拍攝人類的影像。

現在,有了一個新的演算法,只要有普通攝像頭拍攝的單一角度的視訊,就可以建立3D模型了。

640?wx_fmt=gif&wxfrom=5&wx_lazy=1

畫出一個立體的你,需要分3步——

首先,AI會分析一段長約幾秒的視訊,裡面的你在運動。比如,旋轉360度來展現每一個迷人的側面。系統要為視訊中的每一幀描繪一個剪影,把人體從背景中剝離出來。基於深度學習,AI可以為你的3D形體和關節位置,做一個粗略的估計。

640?wx_fmt=gif

第二步,要把每一幀裡建立的虛擬人形原本的姿勢去掉,讓許多的你伸開手臂,把自己變成丁字形 (其實是箭頭形) 。這些丁字人的資訊整合在一起,就能建立一個更準確的模型。

640?wx_fmt=gif

最後,根據影像記錄的頭髮、衣著和皮膚資料,AI會給你的模型加上色彩和質地。這樣,一個生動活潑的你就出現在大屏上了。

640?wx_fmt=gif

許多不同身材不同打扮、且站在不同背景之下的人類,參與了演算法的測試。團隊欣喜地發現,AI擁有誤差5毫米以內的平均準確度。

640?wx_fmt=gif

 看,我膨脹了

除此以外,演算法還可以還原衣服的褶皺。不過,它似乎對短裙和長髮有些特殊的情節,總是沒辦法把這些元素科學地重現出來。直男鑑定完畢。

640?wx_fmt=gif

 是,魔鬼的步伐

只要獲得了你的3D復刻,就可以隨意調整它的體重、穿著和姿勢了。就算是完美的芭蕾舞旋轉,也不在話下,原版的你可能也會有點羨慕吧。

但我只想知道,自己玩自己,是一種怎樣的體驗。

論文傳送門:

https://arxiv.org/pdf/1803.04758

誠摯招聘

量子位正在招募編輯/記者,工作地點在北京中關村。期待有才氣、有熱情的同學加入我們!相關細節,請在量子位公眾號(QbitAI)對話介面,回覆“招聘”兩個字。

640?wx_fmt=jpeg

量子位 QbitAI · 頭條號簽約作者

վ'ᴗ' ի 追蹤AI技術和產品新動態


相關文章