谷歌ARCore 1.24帶來Raw Depth API,為開發者開放原始深度圖
創建ARCore是為了向開發者提供簡單而強大的AR工具來無縫融合數字世界和物理世界。從允許粉絲與自己喜愛的角色互動,到為完美家居放置虛擬電子設備和家具等等,我們在過去的數年里已經看到開發者創建了各種各樣的AR內容來娛樂、吸引和幫助人們。
在今年的I/O大會里,谷歌正繼續優化和構建用以幫助AR開發者的工具。對于ARCore 1.24,團隊帶來了Raw Depth API和Recording and Playback API。所述API將能幫助開發者創建新類型的AR體驗,并加快相關的開發周期。
1. 通過深度增加真實感和精度
當Depth API于2020年與大家見面時,數以億計的Android設備獲得了實時生成深度圖的能力,而且不需要專門的深度傳感器。深度圖中的數據經過平滑處理,填補了因缺少視覺信息而可能出現的任何空白,從而能夠幫助開發者輕松創建諸如遮擋這樣的深度效果。
全新的Raw Depth API能夠生成包含相應置信度圖的“原始”深度圖,從而提供場景中對象幾何的更詳細表示。原始深度圖包括非平滑數據點,并且置信度圖為原始深度圖中的每個像素提供深度估計的置信度。
Raw Depth API中的優化幾何圖形可以實現更精確的深度測量和空間感知。在ARConnect app中,更精確的測量可以幫助用戶更深入地理解周遭的物理環境。AR Doodads app則利用原始深度的空間感知來允許用戶構建逼真的虛擬魯布·戈德堡機械。
PHORIA的ARConnect(左)和Jam3的AR Doodas(右)利用了Raw Depth API中的優化幾何圖形
Raw Depth API中的置信度圖允許開發者實時過濾深度數據。例如,TikTok抖音的最新效果允許用戶上傳圖像,并將其打包到真實世界的對象。圖像匹配表面,深度估計具有高置信度。開發者過濾高置信度深度數據的能力對于三維對象和場景重建同樣至關重要。你可以在3D Live Scanner app中看到這一點,所述應用程序允許用戶掃描空間,并創建、編輯和共享3D模型。
TikTok抖音和3D Live Scanner利用了Raw Depth API的置信度圖
谷歌同時引入了一種新型的命中測試,它使用深度圖中的幾何圖形來提供更多的命中測試結果,即使是低紋理和非平面區域都是如此。以前,命中測試只有在具有大量視覺特征的表面才能實現最好的效果。
與先前的Depth API一樣,這種升級利用了運動深度,使得它們可以支持數億臺Android設備,而且無需依賴于專門的傳感器。當然,盡管不需要諸如飛行時間傳感器之類的深度傳感器,但擁有它們將能進一步提高體驗的質量。
除了所述的應用程序之外,ARCore Depth Lab同時更新了Raw Depth API和深度命中測試的示例。所述內容及更多請訪問Depth API文檔頁面,并從今天開始使用Android和Unity構建屬于你的AR內容。
2. 提高開發速度&捕獲后AR
AR開發者經常遇到的一個難點是,需要在特定的地方和場景不斷地進行測試。開發者可能并不總是能夠訪問所述位置,而且照明會發生變化,傳感器不會在每個實時攝像頭會話期間捕捉到完全相同的信息。
全新的Recording and Playback API旨在解決這一問題。現在,開發者不僅可以錄制視頻片段,同時可以錄制IMU和深度傳感器數據。在播放時,你可以訪問相同的數據,從而能夠復制完全相同的場景,并在舒適的工作空間中測試體驗。
滴滴使用Recording and Playback API在滴滴配送app中構建和測試AR方向。這能夠幫助團隊節省25%的研發和測試成本,60%的差旅成本,并將開發周期縮短了6個月的時間。
除了提高開發速度之外,Recording and Playback API同時為新的AR體驗提供了可能,如捕獲后AR。使用視頻可以實現異步AR體驗,消除時間和地點限制。例如,當可視化AR家具時,用戶不必再呆在家里。取而代之的是,你可以直接調出家的視頻,并精確地放置AR asset。以這種方式,你就可以“把AR帶到任何地方”。
SK Telecom的Jump AP利用Recording and Playback API將場景從韓國直接傳輸到用戶家中,以增強與文化宣傳相關的體三維內容和3D AR內容。
Recording and Playback API允許用戶錄制視頻、插入3D角色和消息,并與家人和朋友共享。
3. 今天就開始使用ARCore
谷歌表示:“這些ARCore更新完善了一套強大的開發工具,可幫助你創建引人入勝的逼真AR體驗。ARCore擁有超過10億的總安裝量和8.5億臺兼容設備,幾乎所有人都可以通過智能手機訪問增強現實。我們非常期待你將如何通過ARCore進行創新并接觸更多的用戶。”
原文來自映維網:https://news.nweon.com/85867