NVIDIA ACE for Games 和 Kairos 演示在 COMPUTEX 展會上首次亮相，本期“NVIDIA Studio 創(chuàng)意加速”欄目將詳細介紹相關(guān)內(nèi)容。
編輯注：本文是我們每周發(fā)布的 NVIDIA Studio 創(chuàng)意加速系列欄目的一部分，該系列旨在介紹一些特邀藝術(shù)家、提供創(chuàng)意提示和技巧，并展示 NVIDIA Studio 技術(shù)如何改善創(chuàng)意工作流。我們還將深入探討全新 GeForce RTX 40 系列 GPU 的性能、技術(shù)和資源，以及它們將如何顯著加速內(nèi)容創(chuàng)作。
作為亞洲最大的年度科技貿(mào)易展覽會，COMPUTEX 展會釋出大量最新資訊，向創(chuàng)作者介紹了大量的 AI 功能，以及來自 NVIDIA Studio 平臺的全新工具和性能提升。
新款 14 英寸 NVIDIA Studio 設(shè)計本配備 GeForce RTX 40 系列筆記本電腦 GPU，與上一代產(chǎn)品相比，性能和便攜性大幅提升，助力創(chuàng)作者加速靈感呈現(xiàn)。AI 專用硬件 Tensor Core 可使 Davinci Resolve 等熱門應(yīng)用中的任務(wù)省時高效。RT Core 與我們的神經(jīng)渲染技術(shù) DLSS 3 結(jié)合，可提升 D5渲染器和 NVIDIA Omniverse 等實時 3D 渲染應(yīng)用的性能。
NVIDIA 還推出了一種加速視頻編碼的新方法。并行場景編碼可將獨立的幀組或場景組發(fā)送到每個 NVIDIA 編碼器。通過充分利用多個 NVIDIA 編碼器，可以在不影響圖像質(zhì)量的情況下，顯著縮減視頻導(dǎo)出時間。首個集成該技術(shù)的軟件是熱門視頻編輯應(yīng)用剪映專業(yè)版和CapCut桌面端。
5 月版 Studio 驅(qū)動目前可供下載。此版本支持更新 MAGIX VEGAS Pro、D5渲染器、VLC 媒體播放器。并且除了支持剪映專業(yè)版和CapCut桌面端之外，該版本還支持針對熱門應(yīng)用的 AI 模型優(yōu)化。
全新 NVIDIA Avatar Cloud Engine (ACE) for Games 平臺借助 AI 驅(qū)動的自然語言交互，使游戲內(nèi)的非玩家角色 (NPC) 變得智能。
Kairos 演示是由 NVIDIA 創(chuàng)意總監(jiān) Gabriele Leone 與 Convai 聯(lián)合開展的項目。在本周的“NVIDIA Studio 創(chuàng)意加速”欄目中將介紹如何將單個模型轉(zhuǎn)變?yōu)轷r活逼真、栩栩如生的角色。
超便攜、高性能
NVIDIA Studio 設(shè)計本采用 NVIDIA Ada Lovelace 架構(gòu)，既可助您高效創(chuàng)作，也可助您暢快游戲。
這是 GeForce RTX 性能首次應(yīng)用于 14 英寸設(shè)備。在此過程中，NVIDIA Studio 設(shè)計本憑借性能和便攜性的完美結(jié)合，改變了超便攜筆記本市場。
華碩靈耀Pro 14最高可選配 GeForce RTX 4070 筆記本電腦 GPU。
這些專為創(chuàng)作者打造的生產(chǎn)力工具性能出眾。NVIDIA Studio 平臺可為超過 110 款創(chuàng)意應(yīng)用提供強力支持，并且在 NVIDIA Studio 驅(qū)動的協(xié)助下為這些應(yīng)用提供持久的穩(wěn)定性。此外，該平臺包含一套由 AI 驅(qū)動且功能強大的 Studio 軟件，例如 NVIDIA Omniverse、Canvas 和 Broadcast。
第五代 Max-Q 技術(shù)是一套先進的 AI 驅(qū)動型技術(shù)，可優(yōu)化筆記本電腦的性能、功耗和噪音，以實現(xiàn)峰值效率。電池續(xù)航時間最多可延長 70%。DLSS 現(xiàn)已針對筆記本電腦進行優(yōu)化： DLSS 3 光學(xué)多幀生成和超分辨率技術(shù)可在 Omniverse 和 D5渲染器以及熱門游戲（例如“賽博朋克 2077 (Cyberpunk 2077)”）中為創(chuàng)作者提供令人驚嘆的 3D 渲染性能。
隨著超便攜筆記本市場的升溫，PC 筆記本電腦制造商為創(chuàng)作者提供了比以往更多的選擇。近期發(fā)布以及更多即將發(fā)布的機型包括：宏碁 非凡X 14、華碩靈耀Pro 14、 聯(lián)想YOGA Pro14s至尊版和微星 絕影14 Studio。
并行場景編碼
近期發(fā)布的 Video Codec SDK 12.1 版本增加了對多編碼器的支持，可將視頻導(dǎo)出時間減半。我們之前發(fā)布的切分編碼方法（切分幀畫面，然后將每個子畫面單獨發(fā)送給一個編碼器）現(xiàn)在具有一個可由應(yīng)用開發(fā)者提供給終端用戶的 API。之前，系統(tǒng)會自動啟用切分編碼來處理 4K 或更高分辨率的視頻，帶來更快的導(dǎo)出預(yù)設(shè)。在此次更新中，開發(fā)者可為用戶提供一個輕松切換編碼方法的選項。
此外，Video Codec SDK 12.1 版本還引入了一種新的編碼方法，即并行場景編碼。在圖片或場景發(fā)送到渲染工作流后，視頻應(yīng)用可以將其分割為多個組。然后，每組均可被獨立渲染，并在最終輸出時以適當?shù)捻樞蚺帕小?/p>
結(jié)果顯示，編碼速度可獲得顯著提高，雙編碼器的速度可提高將近 80%，在兩個以上的 NVIDIA 編碼器場景下還可以進一步提升編碼速度（例如 NVIDIA RTX 6000 Ada 架構(gòu)專業(yè) GPU）。與現(xiàn)有的切分編碼方法相比，圖像質(zhì)量也有所提高。
剪映：全能易剪的視頻創(chuàng)作工具，讓人人都能參與創(chuàng)作，輕松記錄美好生活。經(jīng)過4年的迭代發(fā)展，剪映已推出移動端、Pad版、專業(yè)版、網(wǎng)頁版多個產(chǎn)品版本，實現(xiàn)了多端互通，為更多場景下的自由創(chuàng)作創(chuàng)造了可能。
剪映專業(yè)版4.2.0和CapCut桌面端2.2.0的Beta版已于今天發(fā)布。經(jīng)測試，視頻導(dǎo)出速度可提升高達67%。用戶可率先在配備兩個或更多編碼器的 RTX GPU 上體驗此優(yōu)勢。
5 月版 Studio 驅(qū)動推出重大更新
5 月版 Studio 驅(qū)動的功能得到顯著的升級和優(yōu)化。
MAGIX 已與 NVIDIA 合作將其 VEGAS Pro AI 模型系列遷移到 WinML，使視頻編輯者能夠更快地應(yīng)用 AI 特效。
此驅(qū)動還為在 WinML 上運行的應(yīng)用優(yōu)化了 AI 功能，包括 Adobe Photoshop、Lightroom、MAGIX Vegas Pro、ON1 和 DxO 等應(yīng)用。
實時光線追蹤渲染器 D5渲染器也添加了 NVIDIA DLSS 3 技術(shù)，可為用戶提供更流暢的視窗體驗，讓他們在瀏覽場景時感受超流暢的動態(tài)效果。建筑師、設(shè)計師、室內(nèi)設(shè)計師以及所有專業(yè) 3D 藝術(shù)家均可從中受益。
D5渲染器與 DLSS 3 強強聯(lián)合，可打造逼真的圖像。
NVIDIA RTX 視頻超分辨率功能（使用 AI 和 RTX Tensor Core 提升視頻質(zhì)量的視頻升采樣技術(shù)）現(xiàn)已完全集成到 VLC 媒體播放器中，您無需再單獨下載。了解詳情。
下載 GeForce Experience 或 NVIDIA RTX Experience 是您升級驅(qū)動，獲悉其最新版本的最簡單方法。
游戲界的王牌
NVIDIA 創(chuàng)始人兼首席執(zhí)行官黃仁勛先生在 COMPUTEX 展會上 發(fā)表了主題演講，介紹了可借助 AI 驅(qū)動的自然語言交互讓游戲 NPC 更智能的全新構(gòu)建服務(wù) NVIDIA ACE for Games。
游戲開發(fā)者和工作室可以使用 ACE for Games 在其軟件和游戲中構(gòu)建和部署自定義的語音、對話和動畫 AI 模型。這項 AI 技術(shù)可以改變整個游戲世界，為單個角色、群體角色或整個城鎮(zhèn)的角色注入新的生命。此技術(shù)的未來無可限量。
ACE for Games 基于 NVIDIA Omniverse 中的技術(shù)構(gòu)建而成。 NVIDIA Omniverse 是一個用于構(gòu)建和運行元宇宙應(yīng)用的開放式開發(fā)平臺，包含針對語音、對話和角色動畫而進行優(yōu)化的 AI 基礎(chǔ)模型。
其中包括 NVIDIA NeMo（可針對游戲角色進行微調(diào)的對話式 AI）、NVIDIA Riva（具有自動語音識別和文字轉(zhuǎn)語音功能），以及 Omniverse Audio2Face（可即時為游戲角色創(chuàng)建生動的面部表情動畫，以匹配任何語音）。Audio2Face 可配合 Omniverse 的虛幻引擎5連接器，開發(fā)者可以直接向 MetaHuman 角色添加面部動畫。
眼見為實：Kairos 演示
在名為 Kairos 的演示中，黃仁勛先生向 COMPUTEX 與會者展示了 ACE for Games，并讓觀眾一窺游戲的未來。
Convai是一家獲得 NVIDIA 初創(chuàng)加速計劃支持的初創(chuàng)公司，專注于為虛擬游戲世界開發(fā)先進的對話式 AI。NVIDIA Lightspeed Studios 由創(chuàng)意總監(jiān)兼 3D 藝術(shù)家 Gabriele Leone 領(lǐng)導(dǎo)，打造出非常真實的場景。二者強強聯(lián)合，展示了開發(fā)者可如何使用 NVIDIA ACE for Games 構(gòu)建 NPC。
在演示中，玩家與一家拉面店的老板 Jin 互動。這個照片級真實的店鋪基于在 NVIDIA Omniverse 中預(yù)先構(gòu)建的虛擬拉面店。
為此，一位 NVIDIA 藝術(shù)家前往東京的一家正宗拉面餐廳，收集了 2,000 多份高分辨率參考圖像和視頻。這些素材的內(nèi)容包含烹飪區(qū)、清潔區(qū)、食物準備去和儲存去等不同廚房區(qū)域的各個角落。Leone 說：“我們使用了大約 70% 的現(xiàn)有模型、30% 的新模型以及 80% 的紋理重建。”
Kairos：在 Autodesk Maya、Blender、UE 5 和 NVIDIA Omniverse 中進行精美渲染。
在數(shù)字拉面店中，物體在 Autodesk 3ds Max 和 Blender 中進行建模，前者采用 RTX 加速的 AI 降噪技術(shù)，后者則利用 RTX 加速的 OptiX 光線追蹤技術(shù)在視窗中實現(xiàn)流暢的交互式創(chuàng)作。以上均由該團隊大量 GeForce RTX 40 系列 GPU 提供支持。
創(chuàng)作者在紋理創(chuàng)作階段使用Adobe Substance 3D Painter， 將 NVIDIA Iray 渲染技術(shù)與 RTX 加速的光線和環(huán)境光遮蔽結(jié)合，用戶只需片刻即可烘焙出大型素材。
“說實話，在缺少 GeForce RTX GPU 和 Omniverse 的
情況下，完成此項目必然要花費大量時間。”
— Gabriele Leone
接下來，借助 UE 5 連接器，該團隊可使用 Omniverse 和 Audio2Face 應(yīng)用直接為拉面店 NPC 添加面部動畫和音頻。
盡管 Jin 是一名 NPC，但他能夠?qū)ψ匀徽Z言給予真實的回復(fù)，并且答復(fù)內(nèi)容與敘事背景故事一致。而這一切都得益于生成式 AI 的幫助。
此外，光照和動畫在 UE 5 中完成，并由 NVIDIA DLSS 技術(shù)提供助力。該技術(shù)借助 AI 對以較低分辨率渲染的幀進行升采樣，同時仍保留高保真細節(jié)，進一步為制作團隊提升視窗的交互性。
將您的拉面訂單交給 NPC – 這個交互式、可對話角色。
突然之間，NPC 變得更具吸引力。亦可大放異彩。
請在微博、嗶哩嗶哩，以及微信上關(guān)注 NVIDIA Studio 的官方帳號，您還可以在抖音上觀看教程并通過訂閱 NVIDIA Studio 新聞通訊從收件箱中了解最新資訊。
