2021 年的谷歌 I/O 大會(huì)發(fā)強(qiáng)勢(shì)回歸。由于去年的大會(huì)被取消，今年的 I/O 大會(huì)有很多更新進(jìn)展。本次大會(huì)采取線上的方式舉辦，從 5 月 18 日持續(xù)到 5 月 20 日，所有人都可以免費(fèi)參與，讓你足不出戶，享受科技盛宴，觀眾也可查看大會(huì)開(kāi)幕式主題演講回放。

在 AR 方面，本次大會(huì)展示了在 Google 搜索，直接查找觀看運(yùn)動(dòng)員的 3D 模型，并用 AR 展示動(dòng)作的實(shí)時(shí)演示。在 AR 平臺(tái)方面，也發(fā)布了跟 ARCore 有關(guān)的最新進(jìn)程。從擴(kuò)大兼容設(shè)備，到跟蹤改進(jìn)和新功能，特別是兩個(gè)主要功能——Raw Depth API，Record and Playback API。除了 3 場(chǎng)演講，workshop 和 Codelabs 還展示了如何使用主要的 ARCore 功能，如 WebXR API、Cloud Anchors、ARCore Depth、ARCore Record and Playback，并通過(guò)代碼樣本一步步構(gòu)建一個(gè) AR 應(yīng)用。

Google 搜索加入 3D 及 AR 展示網(wǎng)球運(yùn)動(dòng)員大阪直美的動(dòng)作實(shí)時(shí)演示

ARCore 新進(jìn)更新

創(chuàng)建 ARCore 的初衷就是為了給開(kāi)發(fā)者提供操作簡(jiǎn)單，且功能強(qiáng)大的工具，幫助人們將數(shù)字世界與現(xiàn)實(shí)世界無(wú)縫融合。作為 Google 搭建的增強(qiáng)現(xiàn)實(shí)體驗(yàn)平臺(tái)，ARCore 自 2017 年發(fā)布至今，成功兼容 8.5 億臺(tái)設(shè)備，讓諸多開(kāi)發(fā)者成功打造體驗(yàn)有趣的應(yīng)用程序，改變?nèi)藗冊(cè)?Google 范圍內(nèi)一起玩樂(lè)、購(gòu)物、學(xué)習(xí)、創(chuàng)造和體驗(yàn)世界的方式。

在今年的 Google I/O 大會(huì)上，我們繼續(xù)優(yōu)化并構(gòu)建 AR 開(kāi)發(fā)工具。ARCore 1.24 上線后，我們陸續(xù)推出了 Raw Depth API 和 Recording and Playback API。這些新的 API 將幫助開(kāi)發(fā)者創(chuàng)建新的 AR 體驗(yàn)，并加快他們的開(kāi)發(fā)周期。

Raw Depth API——讓深度和空間意識(shí)更加真實(shí)

2020 年，Depth API 初次與大家見(jiàn)面。讓數(shù)以億計(jì)的安卓設(shè)備，無(wú)需使用專門的深度傳感器，就能實(shí)時(shí)生成深度圖。這些深度圖中的數(shù)據(jù)經(jīng)過(guò)平滑處理，成功填補(bǔ)了因視覺(jué)信息缺失而產(chǎn)生的空白，讓開(kāi)發(fā)者能夠輕松創(chuàng)建“遮擋”這樣的深度效果。

全新的 ARCore Raw Depth API 可以生成帶有“置信圖（corresponding confidence images）”的“原始深度圖”，從而針對(duì)場(chǎng)景中的物體，提供更詳細(xì)的幾何形狀。原始深度圖包括非平滑數(shù)據(jù)點(diǎn)，置信圖則為原始深度圖中的每個(gè)像素，提供了深度估計(jì)的置信度。

Raw Depth API 改進(jìn)后的幾何圖形讓深度測(cè)量和空間意識(shí)更加精確。此外，Raw Depth API 的置信圖為開(kāi)發(fā)者提供實(shí)時(shí)過(guò)濾深度數(shù)據(jù)。例如，TikTok 最新的濾鏡讓用戶能夠上傳圖像，并將圖像包覆在真實(shí)世界的物體上。使圖像素材于現(xiàn)實(shí)物體表面高度契合。

開(kāi)發(fā)者過(guò)濾高置信度深度數(shù)據(jù)的能力對(duì)于三維物體和場(chǎng)景重建也是至關(guān)重要的。3D Live Scanner 應(yīng)用程序能夠幫助用戶掃描他們的空間并創(chuàng)建、編輯和分享 3D 模型。

除了應(yīng)用程序之外，ARCore 深度實(shí)驗(yàn)室中同樣更新了 Raw Depth API 和深度命中測(cè)試的實(shí)例。你可以在“適用于 Android 的深度 API 概述”網(wǎng)頁(yè)中上找到與之相關(guān)的更多內(nèi)容，并利用 Android 和 Unity 建構(gòu)你的 AR。

Recording Playback API——場(chǎng)景輕松復(fù)制，提升開(kāi)發(fā)速度

對(duì)于 AR 開(kāi)發(fā)者來(lái)說(shuō)，一個(gè)反復(fù)出現(xiàn)的痛點(diǎn)是，需要在特定的地方和場(chǎng)景中不斷進(jìn)行測(cè)試，不但耗時(shí)耗力，許多地點(diǎn)并不允許開(kāi)發(fā)者隨時(shí)隨地進(jìn)出。此外，由于時(shí)間不同照明會(huì)存在差異和變化，不能確保傳感器在每次現(xiàn)場(chǎng)攝像時(shí)都捕捉到完全相同的信息，這就對(duì)后期開(kāi)發(fā)的調(diào)較帶來(lái)了挑戰(zhàn)。

新的 ARCore Recording and Playback API 就是針對(duì)這一挑戰(zhàn)推出的。利用這個(gè)功能，開(kāi)發(fā)者不僅可以錄制視頻片段，同時(shí)還可以記錄 IMU 和深度傳感器數(shù)據(jù)。在回放時(shí)，開(kāi)發(fā)者可以回訪相同的數(shù)據(jù)，真正實(shí)現(xiàn)場(chǎng)景復(fù)制，并在任何舒適的工作空間中測(cè)試體驗(yàn)。這項(xiàng)功能在非常時(shí)期，讓無(wú)法親臨現(xiàn)場(chǎng)的遠(yuǎn)端開(kāi)發(fā)測(cè)試變成了可能。

滴滴率先嘗鮮這一技術(shù)，使用 Recording and Playback API 在“滴滴出行 ”App 中建立并測(cè)試 AR 指向功能。由于能完全復(fù)制場(chǎng)景及數(shù)據(jù)，滴滴節(jié)省了 25% 的研發(fā)和測(cè)試成本和 60% 的差旅費(fèi)用。不僅如此，開(kāi)發(fā)周期更是縮短了 6 個(gè)月。

Post - Capture AR

除了縮短研發(fā)周期，錄制和回放還為 AR 體驗(yàn)帶來(lái)了更多的新機(jī)遇，Post-Capture AR就是基于 Recording and Playback API 的另一項(xiàng)強(qiáng)大功能：使用記錄了IMU 和深度傳感器數(shù)據(jù)的視頻，帶來(lái)不同步的 AR 體驗(yàn)，消除時(shí)間和地點(diǎn)限制。例如，在放置虛擬 AR 家具時(shí)，用戶不需要待在一直待在家里，只要調(diào)出家中的視頻，就能準(zhǔn)確地放置 AR 家具。通過(guò)這種方式，你可以 把 AR 帶到任何地方。

SK 電信的 Jump AR 使用 Recording and Playback API，成功將場(chǎng)景從韓國(guó)傳輸?shù)接脩艏抑校鰪?qiáng)與文化宣傳相關(guān)的 3D AR 內(nèi)容。

新升級(jí)的 API 正在讓 ARCore 日漸強(qiáng)大，幫助開(kāi)發(fā)者打造出更加逼真的 AR 體驗(yàn)。隨著兼容設(shè)備數(shù)量增加，ARCore 讓幾乎所有擁有智能手機(jī)的人都能體驗(yàn)增強(qiáng)現(xiàn)實(shí)技術(shù)。我們期待有更多的開(kāi)發(fā)者可以利用 ARCore 進(jìn)行創(chuàng)新，讓用戶體驗(yàn) AR 的強(qiáng)大。

原文標(biāo)題：一起看 I/O｜ARCore 1.24 版本上線，亮點(diǎn)更新一次看全

文章出處：【微信公眾號(hào)：谷歌開(kāi)發(fā)者】歡迎添加關(guān)注！文章轉(zhuǎn)載請(qǐng)注明出處。

責(zé)任編輯：haq