RTX 50 系列顯示卡不僅讓遊戲表現效能提升,也讓創作流程更流暢,AI 助理也將變得更聰明。NVIDIA 在 Computex 展示活動中帶來結合遊戲、創作和人工智慧助理領域的最新技術進展,其中包含 DLSS 4 技術、生成式 AI 工作流程,可以有效結合實況等運用方式。


DLSS 4 革命性提升遊戲視覺與效能
NVIDIA 深度學習超高取樣(DLSS)技術迎來了最新版本 DLSS 4 顯著提升了遊戲效能,同時有效降低了畫面延遲。DLSS 4 更大幅改善了畫面中常見的閃爍和不穩定現象,尤其是在木質交織紋理或臉部等細節豐富的區域。


NVIDIA 以《電馭叛客 2077》的展示為例,DLSS 4 結合了光線重建技術,能夠有效消除畫面上咖啡機、水瓶和眼鏡等物體上出現的不穩定和閃爍問題,讓畫面質感更上一層樓。由於引入了全新的 Transformer 模型改進在影像品質的飛躍。新的模型能更好地保留遊戲原有細節,並修正了許多過去鋸齒線條在運動時產生的「爬行」現象。



Portal RTX 更新:DLSS 4 與神經渲染技術再進化
經典遊戲《Portal RTX》引入了 DLSS 4 多畫面生成技術,在 NVIDIA 5060 顯示卡上,以 1080p 解析度、所有設定最大化並開啟路徑追蹤的情況下,更新前使用 DLSS 3.5 約可達到 95 幀率。而更新後開啟 DLSS 4 多畫面生成(4x 模式),幀率可躍升至約 160-170 幀,讓玩家能夠充分利用 144Hz 的螢幕更新率。

此更新也整合了 DLSS 4 的新 Transformer 模型,大幅改善了影像品質。舊模型在運動中可能遺失大量細節,導致畫面顯得平坦;而新模型則能忠實呈現藝術家原本融入遊戲中的刮痕等細節,讓畫面更豐富、更具層次感。

《傳送門 RTX》更新還新增了神經輻射快取(Neural Radiance Cache)技術,展示人員表示這是一種基於 AI 計算間接照明的神經著色器。傳統路徑追蹤需要模擬每一條光線,而神經輻射快取只需模擬每像素兩條光線,其餘部分則由 AI 推斷,這不僅提升了效能,也在計算間接照明時實現了更高的精確度。
神經輻射快取顯著提高了光線變化的反應速度。舉例來說,在展示中,一個按鈕改變燈牌顏色的反射,即使快速點擊按鈕,反射也能迅速且完整地變為對應的顏色。值得一提的是,這項技術運行時對效能幾乎沒有影響,仍能保持約 180 幀的幀率。擁有《傳送門》原版遊戲的玩家可以免費體驗此次更新。
Streamlabs ACE 與實況主 AI 助理
Streamlabs 桌面版則是展示整合由 NVIDIA ACE 驅動的 AI 助理,結合了遊戲內 AI 和串流聊天室 AI,主以感知遊戲中發生的事件以及實況的即時狀態。對於入門實況主而言,同時兼顧遊戲、娛樂觀眾、關注聊天訊息、調整音訊和視訊設定等多項任務極具挑戰性,而 AI 助理的目標正是幫助他們提升製作品質,讓實況變得更輕鬆。

Streamlabs 表示 AI 助理主要扮演三個關鍵角色,首先,作為「數位夥伴」,它能協助新手實況主開啟話題,與觀眾互動,或在遊戲內容較為平淡時提供建議。它能夠觀察聊天內容並即時總結觀眾的意見,甚至在實況主長時間未發言時,提示其與觀眾互動。

其次能作為「製作人」,AI 助理能夠自動執行複雜的串流操作。例如,當遊戲角色死亡時,助理可以自動保存精彩實況存檔、切換到遊戲結束畫面、加入音訊,並在幾秒後切換回原場景,最後由虛擬角色發表毒舌評論。

最後作為「技術支援」能協助解決常見的串流問題。例如當實況主麥克風靜音時,助理會立即提醒並主動詢問是否需要解除靜音。它也能回答實況主的各種疑問,提供即時的技術協助。
Streamlabs AI 助理是使用了 NVIDIA Ace 音訊介面外掛程式,是基於 Diffusion 模型,能夠創造更逼真臉部動畫和高品質講話時臉部動作的模型。助理的外觀和行為可以高度客製化,用戶可以設定其個性(例如中性、諷刺)、回應風格(例如模仿海盜、維多利亞風格),甚至更換虛擬人偶形象。虛擬人偶最初將提供約 30 種基於 Metahuman 框架的模型,未來希望支援更多不同的藝術風格,甚至能基於用戶個人照片生成虛擬人偶。助理的虛擬人偶可以設定為持續顯示,或只在說話時出現。

Streamlabs 計畫讓用戶無需程式碼,只需透過自然語言處理就能建立外掛程式,進一步擴展 AI 助理的功能。這套系統基於 GSS (G Assist) 技術,可以控制 NV app 和 NVIDIA 的電腦功能。
透過 API,AI 助理可以與各種第三方服務整合,例如:在 Discord 上分享遊戲錄影;向 Google Gemini 查詢即時資訊,如《Counter-Strike 2》的錦標賽資訊和熱門隊伍,且系統會保持上下文,允許後續提問;在 Twitch 上查詢特定實況主是否線上;透過 If This Then That 運行自動化例程,例如說出「遊戲時間」來開啟風扇、發送遊戲新聞通知或控制 Spotify 播放清單;以及透過 Signal RGB 控制系統的 RGB 燈效,並切換到遊戲模式。
這項技術初期將在 Streamlabs 桌面版推出,未來計畫透過 OBS 外掛程式整合到 OBS 中。助理的回應延遲是團隊目前正在優化的重點,其支援語言初期為英文,未來計畫支援更多語言。
Project R2X 與數位人偶 UI:實現更自然的 AI 互動
NVIDIA 的 Project R2X 探索了將使用者介面(UI)置於 AI 助理之前的可能性,以期實現更自然的人機互動。展示中的 AI 數位角色Aki,能夠流暢地回應使用者的自然語言請求,例如創作一首關於阿姆斯特丹和紫色的詩歌。

Aki 的語音和臉部動畫都是在本地生成的,使用於於 NVIDIA Audio to Face 3.0 技術。Audio to Face 3.0 是一個新的 Diffusion 架構,可透過 NVIDIA Ace 外掛程式使用,也能廣泛應用於遊戲角色。該系統可以連接到 Linkflow,作為視覺化的「無程式碼到低程式碼」編輯器,用於組合不同的 AI 模型、工具和功能。透過 Linkflow 桌面版提供了一個 NVIDIA G Assist 節點,允許 AI 助理呼叫 G Assist 的功能。例如,用戶可以透過語音指令讓 Aki 使用 G Assist 更改鍵盤燈光顏色。

數位角色可作為參考藍圖,用戶也可以使用自己的 3D 角色。應用程式包含一些常用功能,例如拖放文件進行內容處理。在展示中,一份關於 Quen 3 的文件被拖入後,AI 立刻提供了文件的概要,它也能處理圖像。

Project R2X 也整合了 NVIDIA 的 RTX Remix 平台。透過 Remix 工具包 API,用戶可以要求 AI 助理替換遊戲場景中選定的資源,例如在《Half-Life》的場景中替換風扇模型。NVIDIA 透過展示許多軟硬整合技術,呈現 AI 和硬體加速提升用戶體驗方面的持續努力,從遊戲更流暢逼真、為創作者提供更高效的工具,或是使人機互動更加自然與便捷,可以為體驗創造更多可能性。