創(chuàng)建ARCore是為了向開發(fā)者提供簡單而強(qiáng)大的AR工具來無縫融合數(shù)字世界和物理世界。從允許粉絲與自己喜愛的角色互動(dòng)，到為完美家居放置虛擬電子設(shè)備和家具等等，我們?cè)谶^去的數(shù)年里已經(jīng)看到開發(fā)者創(chuàng)建了各種各樣的AR內(nèi)容來娛樂、吸引和幫助人們。

在今年的I/O大會(huì)里，谷歌正繼續(xù)優(yōu)化和構(gòu)建用以幫助AR開發(fā)者的工具。對(duì)于ARCore 1.24，團(tuán)隊(duì)帶來了Raw Depth API和Recording and Playback API。所述API將能幫助開發(fā)者創(chuàng)建新類型的AR體驗(yàn)，并加快相關(guān)的開發(fā)周期。

1. 通過深度增加真實(shí)感和精度

當(dāng)Depth API于2020年與大家見面時(shí)，數(shù)以億計(jì)的Android設(shè)備獲得了實(shí)時(shí)生成深度圖的能力，而且不需要專門的深度傳感器。深度圖中的數(shù)據(jù)經(jīng)過平滑處理，填補(bǔ)了因缺少視覺信息而可能出現(xiàn)的任何空白，從而能夠幫助開發(fā)者輕松創(chuàng)建諸如遮擋這樣的深度效果。

全新的Raw Depth API能夠生成包含相應(yīng)置信度圖的“原始”深度圖，從而提供場景中對(duì)象幾何的更詳細(xì)表示。原始深度圖包括非平滑數(shù)據(jù)點(diǎn)，并且置信度圖為原始深度圖中的每個(gè)像素提供深度估計(jì)的置信度。

Raw Depth API中的優(yōu)化幾何圖形可以實(shí)現(xiàn)更精確的深度測量和空間感知。在ARConnect app中，更精確的測量可以幫助用戶更深入地理解周遭的物理環(huán)境。AR Doodads app則利用原始深度的空間感知來允許用戶構(gòu)建逼真的虛擬魯布·戈德堡機(jī)械。

PHORIA的ARConnect（左）和Jam3的AR Doodas（右）利用了Raw Depth API中的優(yōu)化幾何圖形

Raw Depth API中的置信度圖允許開發(fā)者實(shí)時(shí)過濾深度數(shù)據(jù)。例如，TikTok抖音的最新效果允許用戶上傳圖像，并將其打包到真實(shí)世界的對(duì)象。圖像匹配表面，深度估計(jì)具有高置信度。開發(fā)者過濾高置信度深度數(shù)據(jù)的能力對(duì)于三維對(duì)象和場景重建同樣至關(guān)重要。你可以在3D Live Scanner app中看到這一點(diǎn)，所述應(yīng)用程序允許用戶掃描空間，并創(chuàng)建、編輯和共享3D模型。

TikTok抖音和3D Live Scanner利用了Raw Depth API的置信度圖

谷歌同時(shí)引入了一種新型的命中測試，它使用深度圖中的幾何圖形來提供更多的命中測試結(jié)果，即使是低紋理和非平面區(qū)域都是如此。以前，命中測試只有在具有大量視覺特征的表面才能實(shí)現(xiàn)最好的效果。

與先前的Depth API一樣，這種升級(jí)利用了運(yùn)動(dòng)深度，使得它們可以支持?jǐn)?shù)億臺(tái)Android設(shè)備，而且無需依賴于專門的傳感器。當(dāng)然，盡管不需要諸如飛行時(shí)間傳感器之類的深度傳感器，但擁有它們將能進(jìn)一步提高體驗(yàn)的質(zhì)量。

除了所述的應(yīng)用程序之外，ARCore Depth Lab同時(shí)更新了Raw Depth API和深度命中測試的示例。所述內(nèi)容及更多請(qǐng)?jiān)L問Depth API文檔頁面，并從今天開始使用Android和Unity構(gòu)建屬于你的AR內(nèi)容。

2. 提高開發(fā)速度&捕獲后AR

AR開發(fā)者經(jīng)常遇到的一個(gè)難點(diǎn)是，需要在特定的地方和場景不斷地進(jìn)行測試。開發(fā)者可能并不總是能夠訪問所述位置，而且照明會(huì)發(fā)生變化，傳感器不會(huì)在每個(gè)實(shí)時(shí)攝像頭會(huì)話期間捕捉到完全相同的信息。

全新的Recording and Playback API旨在解決這一問題。現(xiàn)在，開發(fā)者不僅可以錄制視頻片段，同時(shí)可以錄制IMU和深度傳感器數(shù)據(jù)。在播放時(shí)，你可以訪問相同的數(shù)據(jù)，從而能夠復(fù)制完全相同的場景，并在舒適的工作空間中測試體驗(yàn)。

滴滴使用Recording and Playback API在滴滴配送app中構(gòu)建和測試AR方向。這能夠幫助團(tuán)隊(duì)節(jié)省25%的研發(fā)和測試成本，60%的差旅成本，并將開發(fā)周期縮短了6個(gè)月的時(shí)間。

除了提高開發(fā)速度之外，Recording and Playback API同時(shí)為新的AR體驗(yàn)提供了可能，如捕獲后AR。使用視頻可以實(shí)現(xiàn)異步AR體驗(yàn)，消除時(shí)間和地點(diǎn)限制。例如，當(dāng)可視化AR家具時(shí)，用戶不必再呆在家里。取而代之的是，你可以直接調(diào)出家的視頻，并精確地放置AR asset。以這種方式，你就可以“把AR帶到任何地方”。

SK Telecom的Jump AP利用Recording and Playback API將場景從韓國直接傳輸?shù)接脩艏抑校栽鰪?qiáng)與文化宣傳相關(guān)的體三維內(nèi)容和3D AR內(nèi)容。

Recording and Playback API允許用戶錄制視頻、插入3D角色和消息，并與家人和朋友共享。

3. 今天就開始使用ARCore

谷歌表示：“這些ARCore更新完善了一套強(qiáng)大的開發(fā)工具，可幫助你創(chuàng)建引人入勝的逼真AR體驗(yàn)。ARCore擁有超過10億的總安裝量和8.5億臺(tái)兼容設(shè)備，幾乎所有人都可以通過智能手機(jī)訪問增強(qiáng)現(xiàn)實(shí)。我們非常期待你將如何通過ARCore進(jìn)行創(chuàng)新并接觸更多的用戶。”

原文來自映維網(wǎng)：https://news.nweon.com/85867