迪斯尼新影象演算法,二維照片轉三維模型

袁欣發表於2013-08-19

【感謝@袁欣_Jason 的熱心翻譯。如果其他朋友也有不錯的原創或譯文,可以嘗試推薦給伯樂線上。】

迪斯尼蘇黎世研究團隊開發出了一種新程式,它可以利用二維(2D)照片做三維(3D)建模。使用數百張攝影照片和一種特殊設計的演算法,該程式可以給電影、電視和遊戲做複雜且真實的 3D 建模,也可以製作或者列印高精度的模型。

從多張不同視角的2D圖片來做3D建模,這不是什麼新鮮事,但由於涉及大量資料,想針對高精度或複雜環境做出高解析度的建模,已被證明是非常困難。

迪斯尼蘇黎世研究團隊開發出的這個演算法可以有效利用這些資料(一組照片),不用將所有輸入資料同時儲存在記憶體之中,就可以高效處理

這項研究已釋出在《Scene Reconstruction from High Spatio-Angular Resolution Light Fields》論文中。 

很多3D模型都是通過鐳射掃瞄真實場景獲得,但是在更復雜的環境中,單一的鐳射掃瞄可能會丟失很多細節,因為前方物體會遮擋住鐳射射線,而照片更容易從不同視角中捕捉場景,但是將這組照片合起來做高解析度3D建模非常難。

通過操作獨立的光線照射(而不是利用影象塊),迪斯尼實驗室的演算法先要計算出可靠的景深估算,特別是物體外部邊界(而非內部區域)。大部分均勻的內部區域利用細到粗流程(而不是標準的粗到細方法)來處理。論文中解釋道:“這樣做,可以讓演算法保持精確的物體輪廓,同時也可以用更少的細節來平滑構造物體。”

據該實驗室所稱,這項新技術將用於製作精緻的電影、視訊遊戲場景,等3D列印技術進一步成熟之後,該技術也可用於列印三維模型。

研究人員展示了他們的最新技術,通過標準單反相機拍攝了一組室內室外的場景,使用100張2100萬畫素的圖片來給每個場景進行三維重構。目前大多數現有的立體重建技術只能做到一二百萬畫素的解析度。

照片必須沿直線路徑拍攝,這種幾何結構可以使研究人員更高效處理資料。研究人員還推廣了這項技術,通過手持相機拍攝的一套照片,也可以用來建模。

視訊

<embed>

相關文章