介紹使用 NVIDIA Omniverse 3D 模擬和協(xié)作平臺推動藝術(shù)創(chuàng)作或設(shè)計流程的個人創(chuàng)作者和開發(fā)者。

該 NVIDIA 初創(chuàng)加速計劃成員構(gòu)建的 Omniverse 擴(kuò)展程序能夠通過移動掃描實(shí)時創(chuàng)建逼真的個性化虛擬形象。

想象一個場景：您拍了一張自拍，幾秒鐘后這張照片就變成了一個會動、會說的個性化的 3D 虛擬形象。

利用 NVIDIA Omniverse 3D 設(shè)計協(xié)作和模擬平臺的一項全新擴(kuò)展程序就可以實(shí)現(xiàn)該場景。

該擴(kuò)展程序由軟件初創(chuàng)企業(yè) in3D 的開發(fā)人員創(chuàng)建，支持人們使用智能手機(jī)將個人的 3D 虛擬形象實(shí)時導(dǎo)入虛擬環(huán)境。Omniverse 擴(kuò)展程序是允許所有人創(chuàng)建和擴(kuò)展 Omniverse 應(yīng)用功能的核心構(gòu)件。

目前 in3D 應(yīng)用可以將人轉(zhuǎn)換成數(shù)字形式并導(dǎo)入 Omniverse 平臺。創(chuàng)作者可以利用該應(yīng)用構(gòu)建引人入勝的虛擬世界并讓虛擬形象來扮演故事中的英雄、演員或觀眾。該應(yīng)用可以在任何帶有攝像頭的手機(jī)上使用，并且能夠根據(jù)自拍再現(xiàn)用戶的物理形態(tài)和肌膚紋理。

這些虛擬形象甚至還能被導(dǎo)入具有動畫和個性化設(shè)計的 3D 世界。

in3D 是 NVIDIA 初創(chuàng)加速計劃成員，該計劃是一項旨在培養(yǎng)尖端初創(chuàng)企業(yè)的全球免費(fèi)計劃。

輕松創(chuàng)建可擴(kuò)展的虛擬形象

過去創(chuàng)建一個逼真的 3D 虛擬形象需要花費(fèi)數(shù)月的時間以及高達(dá)數(shù)萬美元的成本。攝影測量法是一種能根據(jù)圖像創(chuàng)建人類 3D 模型的標(biāo)準(zhǔn)方法，該方法需要利用數(shù)字工作室完成，構(gòu)建成本極高，且虛擬形象缺乏可擴(kuò)展性。

in3D 的 3D 虛擬形象創(chuàng)建流程簡單且可擴(kuò)展。該應(yīng)用通過移動掃描來捕捉一個人的幾何形狀、紋理、深度以及各種矢量，并利用這些信息復(fù)刻栩栩如生的細(xì)節(jié)，創(chuàng)造虛擬形象的預(yù)測動畫。

in3D 的總部位于以色列特拉維夫。該公司首席執(zhí)行官 Dmitry Ulyanov 表示，該應(yīng)用能夠以厘米級的精度捕捉微小細(xì)節(jié)并自動修復(fù)光照效果，以便能從一張自拍照片中獲得精確的頭部幾何形狀并以此預(yù)估用戶的準(zhǔn)確體形。

Ulyanov 表示，創(chuàng)作者在構(gòu)建 3D 世界時可以利用 in3D 軟件來節(jié)省時間等成本、提高生產(chǎn)力。

“手動創(chuàng)建一個虛擬形象可能需要長達(dá)數(shù)月的時間。但利用 in3D 的掃描應(yīng)用和軟件開發(fā)工具包，用戶能在同樣的時間內(nèi)使用 GPU 和手機(jī)掃描并上傳 21000 個人來構(gòu)建虛擬形象?！?/p>

連接 Omniverse

Ulyanov 表示，通過將 in3D 的擴(kuò)展程序與 NVIDIA Omniverse Cloud Engine（ACE）結(jié)合使用，用戶可以輕松地自定義從 in3D 導(dǎo)入的虛擬形象，從而實(shí)現(xiàn)在虛擬世界實(shí)時、大規(guī)模的互動，為虛擬形象的構(gòu)建帶來更多可能性。

in3D 使用一種開源、可擴(kuò)展的文件格式——通用場景描述（USD）將其高保真虛擬形象無縫集成到 Omniverse。虛擬形象數(shù)據(jù)全都包含在 USD 文件中，用戶不需要復(fù)雜的著色器或嵌入物，只需要簡單拖放就能將虛擬形象導(dǎo)入 Omniverse。

在將 USD 格式的虛擬形象導(dǎo)入 Omniverse 后，用戶就可以在 Omniverse Create 和 Audio2Face 等應(yīng)用中對虛擬形象進(jìn)行其他操作。Omniverse 有支持用戶整體內(nèi)容創(chuàng)作的完整工具集，比如制作虛擬形象的身體動畫的重定向工具以及能夠制作虛擬形象的面部表情的 Audio2Face 等。

in3D 使用 Omniverse Kit 和 VSCode 計算機(jī)程序來完成構(gòu)建該 Omniverse 擴(kuò)展程序的開發(fā)流程。Ulyanov 表示，VSCod 程序支持用戶在代碼中自行設(shè)置斷點(diǎn)，是一種簡單、便捷、開箱即用的 Omniverse 連接解決方案，in3D 正是通過該程序來與 Omniverse 連接。

Ulyanov 還表示：“將我們的 SDK 與其他 3D 開發(fā)者的軟件整合在一起能夠帶來巨大的改變。通過上線我們的 Omniverse 擴(kuò)展程序，我們希望能夠擴(kuò)大使用我們虛擬形象應(yīng)用的開發(fā)者人數(shù)?！?/p>

in3D 首席營銷官 Sergei Sherman 表示：“我們現(xiàn)在已經(jīng)能夠上傳我們的 SDK 并將它與 3D 開發(fā)者使用的所有工具相連，in3D 已成為能在所有 3D 開發(fā)環(huán)境中部署的解決方案，在這么短的時間內(nèi)僅依靠我們自己的資源是無法實(shí)現(xiàn)的。”

加入創(chuàng)作者行列

全世界的創(chuàng)作者和開發(fā)者可以免費(fèi)下載 NVIDIA Omniverse，企業(yè)團(tuán)隊可以使用該平臺完成他們的 3D 項目。

注冊并參與將于 9 月 19 日至 22 日舉行的 AI 和元宇宙時代的開發(fā)者大會——NVIDIA GTC 大會，了解如何運(yùn)用 Omniverse 連接和創(chuàng)建虛擬世界。大會期間還將舉辦數(shù)十場分會和特別活動。所有人都可以免費(fèi)注冊 GTC 大會。

開發(fā)者可以在北京時間 9 月 10 日星期六早晨 6 點(diǎn)之前使用 Omniverse Code 創(chuàng)建 Omniverse 擴(kuò)展程序來參加首屆#ExtendOmniverse 競賽。參賽者將有機(jī)會贏得 NVIDIA RTX GPU。獲獎?wù)呙麊螌⒃?GTC 上的 NVIDIA Omniverse 用戶組活動中公布。

Omniverse 資源中心為開發(fā)者提供文檔和教程，這些文檔和教程詳細(xì)介紹了 Ulyanov 等開發(fā)者如何為該平臺構(gòu)建基于 USD 的自定義應(yīng)用和擴(kuò)展程序。