李開復都在玩的裸眼AR:雲擼貓從未如此真實,谷歌3D動物走紅

機器之心發表於2020-04-03
李開復都在玩的裸眼AR:雲擼貓從未如此真實,谷歌3D動物走紅

宅家太無聊?不如造個動物園玩玩。

谷歌最近更新了其移動端的 AR 和 3D 動物功能,被疫情困於家中的人們玩得特別溜,網友紛紛曬出各種在家裡圈養的各種鯊魚、老虎、熊貓等等,李開復老師也不例外。

吸貓重度患者從未感受過如此真實的雲擼貓,你甚至要懷疑家裡是否當真養了一直浣熊。


作者 | 機器之能


一個大膽的想法,你想過在臥室裡養一隻老虎作寵物嗎?

現在,只需在智慧手機或平板電腦上使用 Google 搜尋「老虎」,然後「見識實體大小的老虎」選項就會出現在搜尋結果中,單擊「3D 檢視」,你的攝像頭裡就會跑出一隻「老虎」了。

李開復都在玩的裸眼AR:雲擼貓從未如此真實,谷歌3D動物走紅

當然你也可以像神奇寶貝訓練師一樣,把老虎放在草地上,將自己的後花園變成動物園。這時候你只能透過手機近距離觀察實體大小的老虎,不過當你移開手機之後是看不到老虎的,你也不會擔心會被咬到。

李開復都在玩的裸眼AR:雲擼貓從未如此真實,谷歌3D動物走紅

李開復都在玩的裸眼AR:雲擼貓從未如此真實,谷歌3D動物走紅

狗和浣熊,誰才是你家養的?

李開復都在玩的裸眼AR:雲擼貓從未如此真實,谷歌3D動物走紅

不再羨慕俄羅斯人,黑熊來和你打招呼嘍~

事實上,自去年初發布擴增實境平臺 ARCore 以來,谷歌一直在悄悄地改善其功能。ARCore 是谷歌推出的搭建擴增實境應用程式的軟體平臺,類似蘋果的 ARKit,它可以利用雲軟體和裝置硬體的進步,將數字物件放到現實世界中。

支援 3D 影像和 AR。AR 通過智慧手機螢幕可以將數字內容和資訊覆蓋到現實世界中。Google 推出的這項功能可以讓人們在手機螢幕上瀏覽 3D 物件,同時也支援在近距離觀看 3D 物件的比例和更多細節,這是在普通影像中無法看到的。

這背後整合了攝像頭和 AR 技術,谷歌在 ARCore 和 ARKit 手機的搜尋結果中加入 3D 模型,這些 3D 模型能直接通過 AR 預覽,從而強化谷歌搜尋結果的互動性和實用性。

當時,谷歌還為 ARCore 開發平臺推出全新深度識別工具 Depth API,強化 AR 應用開發的體驗。該工具可讓開發者使用谷歌的動態深度演算法、RGB 攝像頭製作深度地圖,讓 AR 應用的體驗更加自然。據瞭解,京東的 AR 實景購、騰訊手遊《一起來捉妖》、滴滴的 AR 實景導航功能背後,都有谷歌 ARCore 的身影。

這次新升級正是 ARCore 的全新 Depth API 的一部分,這個 API 不久後將允許開發人員完成所謂的「遮擋」,即在 AR 場景中,虛擬的人工物體會被場景中的真實物體所遮擋。

例如,在房間中構建一個虛擬的貓,當你把相機的角度放在床或桌子或其他物體之間時,你可以看到這隻貓從視野中消失。

李開復都在玩的裸眼AR:雲擼貓從未如此真實,谷歌3D動物走紅

谷歌目前表示,他們已經做好了對其進行升級的準備,新的升級將會在未來讓 AR 體驗看起來更加真實。

此外,谷歌AI團隊近日公佈了一種全新的移動端 3D 識別方案:Objectron,其特點是可通過AI模型,在 2D 影像中預測物體在場景中的位置、尺寸和方向,可用於機器人、自動駕駛汽車、影像檢索、AR 等場景。

李開復都在玩的裸眼AR:雲擼貓從未如此真實,谷歌3D動物走紅

為了訓練 AI 模型,谷歌團隊使用了移動端 AR session 資料(包括攝像頭影像、稀疏 3D 點雲、預測光線、平面區域等),彌補了移動裝置不具備高階 3D 感測器的難題(市面上大多數 3D 資料依賴鐳射雷達等 3D 感測器,對日常物體的 3D 標記資料卻很少)。

除了真實環境的資料外,還使用了合成的 AR 資料來提高AI預測準確性。為提高合成資料的質量(提升了10%準確性),谷歌研發了一個 AR 合成資料生成方案(AR Synthetic Data Generation),特點是可通過調整攝像頭角度、識別平面、預測的光線資料,來生成符合物理規則的 3D 位置資訊,以及符合場景的光線,讓融入在具有 AR session 資料的場景中的虛擬物體看起來更自然。

要想開啟這項功能,你需要準備一臺執行 Android 7.0 或更高版本的 Android 智慧手機 或者執行 iOS 11 或適用於 Android / iOS 的 Google Chrome 瀏覽器。

谷歌可提供的 3D 動物玩法包括二十餘種,包括獅子、虎、獵豹、鯊魚、刺蝟、鴨、企鵝、狼、琵琶魚、山羊、羅威納犬、蛇類、鷹、棕熊、鱷魚、馬、金剛鸚鵡、哈巴狗、龜、貓、章魚、狗等。

例如搜尋「鯊魚(shark)」,在圖片搜尋結果和Wikipedia對熊貓的描述下面,您將看到一個小框,上面寫著:「近距離見識真實大小的鯊魚」。單擊「3D 檢視」按鈕,然後單擊「在您的空間中檢視」以檢視您周圍環境中的熊貓。您需要授予Google訪問相機的許可權,才能將鯊魚插入您的空間。

接下來你就可以透過手機觀察真實般大小的鯊魚。

李開復都在玩的裸眼AR:雲擼貓從未如此真實,谷歌3D動物走紅

通過這種方式,你還可以看到其他更多的動物,例如狗、熊貓和烏龜。

李開復都在玩的裸眼AR:雲擼貓從未如此真實,谷歌3D動物走紅

很多推特網友也紛紛「大開腦洞」,嘗試更多玩法,讓虛擬動物與環境更匹配,比如讓熊貓坐在沙發上,營造出一副「懶洋洋」宅家的景象。

李開復都在玩的裸眼AR:雲擼貓從未如此真實,谷歌3D動物走紅

譬如獅子、蛇和老虎。

李開復都在玩的裸眼AR:雲擼貓從未如此真實,谷歌3D動物走紅

還有網友曬出了與獅子共處一室的圖片,當看到威風凜凜的獅子站在身旁,是否會感到一絲恐懼?

李開復都在玩的裸眼AR:雲擼貓從未如此真實,谷歌3D動物走紅

受疫情影響,不少人困於家中,虛擬動物的出現讓人們的生活多了一絲趣味,甚至幫助很多家長解決在家帶娃找不到趣味遊戲的困擾。

谷歌 3D 動物走紅,讓 AR 技術的價值得到挖掘,帶來更多教育使用者的空間。疫情期間,AR 與 3D 結合的體驗還在持續,AR 技術也會在除娛樂之外的其他地方發揮更大的價值。


相關文章