率先在游戲中使用生成式 AI

在 NVIDIA Omniverse 的基礎(chǔ)上，“ACE 游戲開發(fā)版 (ACE for Games)”為語音、對話和角色動畫提供優(yōu)化的AI基礎(chǔ)模型，包括：

• NVIDIA NeMo 大型語言模型（LLM）：使用專有數(shù)據(jù)構(gòu)建、自定義和部署語言模型。根據(jù)游戲故事的世界觀及人物背景來定制調(diào)整 LLM，并且通過NeMo Guardrails 來保護對話不會出現(xiàn)產(chǎn)生相反效果或不安全的內(nèi)容。

• NVIDIA Riva：用于自動語音識別（ASR）及文本轉(zhuǎn)語音，以啟用實時語音對話。

• NVIDIA Omniverse Audio2Face：用于配合語音音軌，實時為游戲角色創(chuàng)建臉部表情動畫。Audio2Face 搭配用于虛幻引擎 5 的 Omniverse Connector，開發(fā)者可以直接將臉部動畫添加到 MetaHuman 的角色上。

開發(fā)者可以整合整套 “NVIDIA ACE 游戲開發(fā)版 (NVIDIA ACE for Games)” 解決方案，或是單獨使用自己需要的組件。

“Kairos” 讓人一窺未來游戲發(fā)展的樣貌

NVIDIA 和參與 NVIDIA Inception 計劃的初創(chuàng)公司 Convai 合作，展示游戲開發(fā)者如何在不久之后使用 “NVIDIA ACE 游戲開發(fā)版 (NVIDIA ACE for Games)” 來構(gòu)建 NPC。Convai 將 ACE 模塊與他們的端到端實時虛擬人平臺相集成，旨在為虛擬游戲開發(fā)尖端的對話式 AI。

在名為 Kairos 的演示中，玩家與拉面店老板 Jin 進行互動。Jin 雖然只是一個 NPC，卻能在生成式 AI 的幫助下配合敘事背景，逼真回答自然語言的問題。歡迎觀看這個由 Unreal Engine 5 使用最新光線追蹤功能和 NVIDIA DLSS 渲染出的演示內(nèi)容。

Convai 創(chuàng)始人兼首席執(zhí)行官 Purnendu Mukherjee 表示：“Convai 通過使用 ‘NVIDIA ACE 游戲開發(fā)版 (NVIDIA ACE for Games)’，讓我們的工具可以達到所需的延遲和絕佳要求，這樣每個開發(fā)者便能以低成本的方式使用 AI 打造 NPC。

在本地或云部署 NVIDIA ACE 游戲模型

支持 “NVIDIA ACE 游戲開發(fā)版 (NVIDIA ACE for Games)” 的神經(jīng)網(wǎng)絡(luò)針對多項功能進行優(yōu)化，在規(guī)模、性能和質(zhì)量方面進行各種取舍。“ACE 游戲開發(fā)版 (ACE for Games)” 代工服務(wù)將協(xié)助開發(fā)者微調(diào)游戲模型，然后通過 NVIDIA DGX Cloud，GeForce RTX PC 或現(xiàn)場加以部署，以實時進行推理。

游戲中沉浸式互動性的交互對延遲有著極為嚴苛的要求，因此這些模型的延遲性能均調(diào)整到最佳狀態(tài)。

生成式 AI 將改變游戲體驗

游戲開發(fā)者與初創(chuàng)公司已在其工作流上使用 NVIDIA 生成式 AI 技術(shù)。

1. 歐洲知名游戲開發(fā)者之一的 GSC Game World，將在即將推出的《潛行者 2：切爾諾貝利之心》（S.T.A.L.K.E.R. 2：Heart of Chornobyl）中采用 Audio2Face。

2. 獨立游戲開發(fā)者 Fallen Leaf 用 Audio2Face 來制作《索利斯堡》（FORT SOLIS）中角色的臉部動畫，《索利斯堡》（FORT SOLIS）是一款以火星為背景的第三人稱科幻驚悚動作游戲。

3. 使用 AI 來制作虛擬角色的 Charisma.ai，通過 Audio2Face 來制作對話引擎中的動畫。

歡迎了解更多使用 NVIDIA ACE 在 NVIDIA Omniverse 上構(gòu)建的內(nèi)容，以及 COMPUTEX 其他最新技術(shù)發(fā)展。