百度AR新開源SLAM/VIO 核心元件ICE-BA 計算能力提速數十倍

pythontab發表於2018-06-27

 

近日,百度AR技術小組參加了由IEEE組織的計算機視覺與模式識別國際會議(CVPR),並開源底層模組ICE-BA,它可整合至各類SLAM(simultaneous localization and mapping,即時定位與地圖構建系統)或VIO(Visual-Inertial Odometry,視覺慣性里程計)系統中,大幅提升系統的跟蹤能力。

ICE-BA由百度聯合浙江大學,由百度擴增實境部和視覺技術部共同主導研發,透過利用SLAM問題的增量特性,高效融合最佳化視覺特徵、慣性感測器資料、迴環約束等資訊,同時保證了最佳化結果的全域性一致性。百度進行的系統評測結果顯示,與業內其他最新技術相比,ICE-BA有數十倍的提速。更多資訊可至專案主頁(https://github.com/baidu/ICE-BA)中獲取。

百度AR新開源SLAM/VIO 核心元件ICE-BA 計算能力提速數十倍

ICE-BA與iSAM2在國際標準VIO資料集EuRoC 上的最佳化時間對比

 

AR(擴增實境)技術作為全新的視覺互動形式,越來越受到營銷、娛樂、遊戲等行業關注。VIO是AR的核心基礎能力之一,相比於VO(Visual Odometry,視覺里程計)和純視覺的SLAM,VIO方案高度整合了慣性感測器的資料,可大幅提升跟蹤能力,並提供精準的尺度估計,能夠給予使用者更好的AR體驗。

目前,科技圈巨頭均在持續佈局與硬體高度整合的VIO能力,蘋果為此推出了ARKit,谷歌則開發了ARCore,百度自研的VIO方案可以精準提供尺度估計。實際上,由於對硬體系統依賴度高,市面中大部分機型均不支援VIO技術,VIO技術並未實現大規模應用。去年10月,百度AR透過DuMix AR平臺,將自主研發的跨平臺6自由度即時跟蹤能力向開發者開放。這一方案能夠更好地解決手機生態碎片化的問題,降低對手機慣性感測器和計算能力的強依賴,幾乎適用於所有主流配備慣性感測器的手機,業界領先。

 

百度AR新開源SLAM/VIO 核心元件ICE-BA 計算能力提速數十倍

 

此次,百度開放ICE-BA,將進一步提升百度AR能力的對外開放力度。目前,百度已透過DuMix AR開放平臺整合AR SDK、內容製作工具、雲端內容平臺、內容分發服務,形成了一站式AR開發整合解決方案,幫助開發者和合作夥伴快速整合SDK,高效製作並分發AR內容。

目前,百度AR能力已在營銷、教育、文化、娛樂等多領域應用。愛奇藝兒童獨立品牌奇巴布運用百度AR能力,打造了情景教學產品,可以真實還原海底世界和熱帶雨林中的動物以及交通工具等等,讓小朋友身臨其境的學習知識,甚至與自己喜愛的動物“同框”留影。百度AR技術還被華為應用於新款榮耀10手機上,實現“虛實結合”的拍照功能,使用者可以與《秦時明月》中的遊戲人物、以及趙麗穎拍照“合影”,獲得“超現實”攝影技能。

百度AR技術團隊表示,未來將繼續在各類AR核心演算法上持續研發,為使用者提供更好的AR技術能力,並在此基礎上提供更多場景的AR行業解決方案,賦能各行各業,共同探索AR價值。


相關文章