編輯注：本文是我們每周發(fā)布的 NVIDIA Studio 創(chuàng)意加速系列欄目的一部分，該系列旨在介紹一些特邀藝術(shù)家、提供創(chuàng)意提示和技巧，并展示 NVIDIA Studio 技術(shù)如何改善創(chuàng)意工作流。我們還將深入探討全新 GeForce RTX 40 系列 GPU 的性能、技術(shù)和資源，以及它們將如何顯著加速內(nèi)容創(chuàng)作。
作為亞洲最大的年度科技貿(mào)易展覽會(huì)，COMPUTEX 展會(huì)釋出大量最新資訊，向創(chuàng)作者介紹了大量的 AI 功能，以及來自 NVIDIA Studio 平臺(tái)的全新工具和性能提升。
新款 14 英寸 NVIDIA Studio 設(shè)計(jì)本配備 GeForce RTX 40 系列筆記本電腦 GPU，與上一代產(chǎn)品相比，性能和便攜性大幅提升，助力創(chuàng)作者加速靈感呈現(xiàn)。AI 專用硬件 Tensor Core 可使 Davinci Resolve 等熱門應(yīng)用中的任務(wù)省時(shí)高效。RT Core 與我們的神經(jīng)渲染技術(shù) DLSS 3 結(jié)合，可提升 D5渲染器和 NVIDIA Omniverse 等實(shí)時(shí) 3D 渲染應(yīng)用的性能。
NVIDIA 還推出了一種加速視頻編碼的新方法。并行場景編碼可將獨(dú)立的幀組或場景組發(fā)送到每個(gè) NVIDIA 編碼器。通過充分利用多個(gè) NVIDIA 編碼器，可以在不影響圖像質(zhì)量的情況下，顯著縮減視頻導(dǎo)出時(shí)間。首個(gè)集成該技術(shù)的軟件是熱門視頻編輯應(yīng)用剪映專業(yè)版和CapCut桌面端。
5 月版 Studio 驅(qū)動(dòng)目前可供下載。此版本支持更新 MAGIX VEGAS Pro、D5渲染器、VLC 媒體播放器。并且除了支持剪映專業(yè)版和CapCut桌面端之外，該版本還支持針對(duì)熱門應(yīng)用的 AI 模型優(yōu)化。
全新 NVIDIA Avatar Cloud Engine (ACE) for Games 平臺(tái)借助 AI 驅(qū)動(dòng)的自然語言交互，使游戲內(nèi)的非玩家角色 (NPC) 變得智能。
Kairos 演示是由 NVIDIA 創(chuàng)意總監(jiān) Gabriele Leone 與 Convai 聯(lián)合開展的項(xiàng)目。在本周的“NVIDIA Studio 創(chuàng)意加速”欄目中將介紹如何將單個(gè)模型轉(zhuǎn)變?yōu)轷r活逼真、栩栩如生的角色。
超便攜、高性能
NVIDIA Studio 設(shè)計(jì)本采用 NVIDIA Ada Lovelace 架構(gòu)，既可助您高效創(chuàng)作，也可助您暢快游戲。
這是 GeForce RTX 性能首次應(yīng)用于 14 英寸設(shè)備。在此過程中，NVIDIA Studio 設(shè)計(jì)本憑借性能和便攜性的完美結(jié)合，改變了超便攜筆記本市場。
華碩靈耀Pro 14最高可選配 GeForce RTX 4070 筆記本電腦 GPU。
這些專為創(chuàng)作者打造的生產(chǎn)力工具性能出眾。NVIDIA Studio 平臺(tái)可為超過 110 款創(chuàng)意應(yīng)用提供強(qiáng)力支持，并且在 NVIDIA Studio 驅(qū)動(dòng)的協(xié)助下為這些應(yīng)用提供持久的穩(wěn)定性。此外，該平臺(tái)包含一套由 AI 驅(qū)動(dòng)且功能強(qiáng)大的 Studio 軟件，例如 NVIDIA Omniverse、Canvas 和 Broadcast。
第五代 Max-Q 技術(shù)是一套先進(jìn)的 AI 驅(qū)動(dòng)型技術(shù)，可優(yōu)化筆記本電腦的性能、功耗和噪音，以實(shí)現(xiàn)峰值效率。電池續(xù)航時(shí)間最多可延長 70%。DLSS 現(xiàn)已針對(duì)筆記本電腦進(jìn)行優(yōu)化： DLSS 3 光學(xué)多幀生成和超分辨率技術(shù)可在 Omniverse 和 D5渲染器以及熱門游戲（例如“賽博朋克 2077 (Cyberpunk 2077)”）中為創(chuàng)作者提供令人驚嘆的 3D 渲染性能。
隨著超便攜筆記本市場的升溫，PC 筆記本電腦制造商為創(chuàng)作者提供了比以往更多的選擇。近期發(fā)布以及更多即將發(fā)布的機(jī)型包括：宏碁 非凡X 14、華碩靈耀Pro 14、 聯(lián)想YOGA Pro14s至尊版和微星 絕影14 Studio。
并行場景編碼
近期發(fā)布的 Video Codec SDK 12.1 版本增加了對(duì)多編碼器的支持，可將視頻導(dǎo)出時(shí)間減半。我們之前發(fā)布的切分編碼方法（切分幀畫面，然后將每個(gè)子畫面單獨(dú)發(fā)送給一個(gè)編碼器）現(xiàn)在具有一個(gè)可由應(yīng)用開發(fā)者提供給終端用戶的 API。之前，系統(tǒng)會(huì)自動(dòng)啟用切分編碼來處理 4K 或更高分辨率的視頻，帶來更快的導(dǎo)出預(yù)設(shè)。在此次更新中，開發(fā)者可為用戶提供一個(gè)輕松切換編碼方法的選項(xiàng)。
此外，Video Codec SDK 12.1 版本還引入了一種新的編碼方法，即并行場景編碼。在圖片或場景發(fā)送到渲染工作流后，視頻應(yīng)用可以將其分割為多個(gè)組。然后，每組均可被獨(dú)立渲染，并在最終輸出時(shí)以適當(dāng)?shù)捻樞蚺帕小?/p>
結(jié)果顯示，編碼速度可獲得顯著提高，雙編碼器的速度可提高將近 80%，在兩個(gè)以上的 NVIDIA 編碼器場景下還可以進(jìn)一步提升編碼速度（例如 NVIDIA RTX 6000 Ada 架構(gòu)專業(yè) GPU）。與現(xiàn)有的切分編碼方法相比，圖像質(zhì)量也有所提高。
剪映：全能易剪的視頻創(chuàng)作工具，讓人人都能參與創(chuàng)作，輕松記錄美好生活。經(jīng)過4年的迭代發(fā)展，剪映已推出移動(dòng)端、Pad版、專業(yè)版、網(wǎng)頁版多個(gè)產(chǎn)品版本，實(shí)現(xiàn)了多端互通，為更多場景下的自由創(chuàng)作創(chuàng)造了可能。
剪映專業(yè)版4.2.0和CapCut桌面端2.2.0的Beta版已于今天發(fā)布。經(jīng)測(cè)試，視頻導(dǎo)出速度可提升高達(dá)67%。用戶可率先在配備兩個(gè)或更多編碼器的 RTX GPU 上體驗(yàn)此優(yōu)勢(shì)。
5 月版 Studio 驅(qū)動(dòng)推出重大更新
5 月版 Studio 驅(qū)動(dòng)的功能得到顯著的升級(jí)和優(yōu)化。
MAGIX 已與 NVIDIA 合作將其 VEGAS Pro AI 模型系列遷移到 WinML，使視頻編輯者能夠更快地應(yīng)用 AI 特效。
此驅(qū)動(dòng)還為在 WinML 上運(yùn)行的應(yīng)用優(yōu)化了 AI 功能，包括 Adobe Photoshop、Lightroom、MAGIX Vegas Pro、ON1 和 DxO 等應(yīng)用。
實(shí)時(shí)光線追蹤渲染器 D5渲染器也添加了 NVIDIA DLSS 3 技術(shù)，可為用戶提供更流暢的視窗體驗(yàn)，讓他們?cè)跒g覽場景時(shí)感受超流暢的動(dòng)態(tài)效果。建筑師、設(shè)計(jì)師、室內(nèi)設(shè)計(jì)師以及所有專業(yè) 3D 藝術(shù)家均可從中受益。
D5渲染器與 DLSS 3 強(qiáng)強(qiáng)聯(lián)合，可打造逼真的圖像。
NVIDIA RTX 視頻超分辨率功能（使用 AI 和 RTX Tensor Core 提升視頻質(zhì)量的視頻升采樣技術(shù)）現(xiàn)已完全集成到 VLC 媒體播放器中，您無需再單獨(dú)下載。了解詳情。
下載 GeForce Experience 或 NVIDIA RTX Experience 是您升級(jí)驅(qū)動(dòng)，獲悉其最新版本的最簡單方法。
游戲界的王牌
NVIDIA 創(chuàng)始人兼首席執(zhí)行官黃仁勛先生在 COMPUTEX 展會(huì)上 發(fā)表了主題演講，介紹了可借助 AI 驅(qū)動(dòng)的自然語言交互讓游戲 NPC 更智能的全新構(gòu)建服務(wù) NVIDIA ACE for Games。
游戲開發(fā)者和工作室可以使用 ACE for Games 在其軟件和游戲中構(gòu)建和部署自定義的語音、對(duì)話和動(dòng)畫 AI 模型。這項(xiàng) AI 技術(shù)可以改變整個(gè)游戲世界，為單個(gè)角色、群體角色或整個(gè)城鎮(zhèn)的角色注入新的生命。此技術(shù)的未來無可限量。
ACE for Games 基于 NVIDIA Omniverse 中的技術(shù)構(gòu)建而成。 NVIDIA Omniverse 是一個(gè)用于構(gòu)建和運(yùn)行元宇宙應(yīng)用的開放式開發(fā)平臺(tái)，包含針對(duì)語音、對(duì)話和角色動(dòng)畫而進(jìn)行優(yōu)化的 AI 基礎(chǔ)模型。
其中包括 NVIDIA NeMo（可針對(duì)游戲角色進(jìn)行微調(diào)的對(duì)話式 AI）、NVIDIA Riva（具有自動(dòng)語音識(shí)別和文字轉(zhuǎn)語音功能），以及 Omniverse Audio2Face（可即時(shí)為游戲角色創(chuàng)建生動(dòng)的面部表情動(dòng)畫，以匹配任何語音）。Audio2Face 可配合 Omniverse 的虛幻引擎5連接器，開發(fā)者可以直接向 MetaHuman 角色添加面部動(dòng)畫。
眼見為實(shí)：Kairos 演示
在名為 Kairos 的演示中，黃仁勛先生向 COMPUTEX 與會(huì)者展示了 ACE for Games，并讓觀眾一窺游戲的未來。
Convai是一家獲得 NVIDIA 初創(chuàng)加速計(jì)劃支持的初創(chuàng)公司，專注于為虛擬游戲世界開發(fā)先進(jìn)的對(duì)話式 AI。NVIDIA Lightspeed Studios 由創(chuàng)意總監(jiān)兼 3D 藝術(shù)家 Gabriele Leone 領(lǐng)導(dǎo)，打造出非常真實(shí)的場景。二者強(qiáng)強(qiáng)聯(lián)合，展示了開發(fā)者可如何使用 NVIDIA ACE for Games 構(gòu)建 NPC。
在演示中，玩家與一家拉面店的老板 Jin 互動(dòng)。這個(gè)照片級(jí)真實(shí)的店鋪基于在 NVIDIA Omniverse 中預(yù)先構(gòu)建的虛擬拉面店。
為此，一位 NVIDIA 藝術(shù)家前往東京的一家正宗拉面餐廳，收集了 2,000 多份高分辨率參考圖像和視頻。這些素材的內(nèi)容包含烹飪區(qū)、清潔區(qū)、食物準(zhǔn)備去和儲(chǔ)存去等不同廚房區(qū)域的各個(gè)角落。Leone 說：“我們使用了大約 70% 的現(xiàn)有模型、30% 的新模型以及 80% 的紋理重建。”
Kairos：在 Autodesk Maya、Blender、UE 5 和 NVIDIA Omniverse 中進(jìn)行精美渲染。
在數(shù)字拉面店中，物體在 Autodesk 3ds Max 和 Blender 中進(jìn)行建模，前者采用 RTX 加速的 AI 降噪技術(shù)，后者則利用 RTX 加速的 OptiX 光線追蹤技術(shù)在視窗中實(shí)現(xiàn)流暢的交互式創(chuàng)作。以上均由該團(tuán)隊(duì)大量 GeForce RTX 40 系列 GPU 提供支持。
創(chuàng)作者在紋理創(chuàng)作階段使用Adobe Substance 3D Painter， 將 NVIDIA Iray 渲染技術(shù)與 RTX 加速的光線和環(huán)境光遮蔽結(jié)合，用戶只需片刻即可烘焙出大型素材。
“說實(shí)話，在缺少 GeForce RTX GPU 和 Omniverse 的
情況下，完成此項(xiàng)目必然要花費(fèi)大量時(shí)間。”
— Gabriele Leone
接下來，借助 UE 5 連接器，該團(tuán)隊(duì)可使用 Omniverse 和 Audio2Face 應(yīng)用直接為拉面店 NPC 添加面部動(dòng)畫和音頻。
盡管 Jin 是一名 NPC，但他能夠?qū)ψ匀徽Z言給予真實(shí)的回復(fù)，并且答復(fù)內(nèi)容與敘事背景故事一致。而這一切都得益于生成式 AI 的幫助。
此外，光照和動(dòng)畫在 UE 5 中完成，并由 NVIDIA DLSS 技術(shù)提供助力。該技術(shù)借助 AI 對(duì)以較低分辨率渲染的幀進(jìn)行升采樣，同時(shí)仍保留高保真細(xì)節(jié)，進(jìn)一步為制作團(tuán)隊(duì)提升視窗的交互性。
將您的拉面訂單交給 NPC – 這個(gè)交互式、可對(duì)話角色。
突然之間，NPC 變得更具吸引力。亦可大放異彩。
請(qǐng)?jiān)谖⒉?、嗶哩嗶哩，以及微信上關(guān)注 NVIDIA Studio 的官方帳號(hào)，您還可以在抖音上觀看教程并通過訂閱 NVIDIA Studio 新聞通訊從收件箱中了解最新資訊。
]]>