NVIDIA 和 ComfyUI 攜手簡化本地 AI 視頻生成工作流

借助 ComfyUI 的應(yīng)用視圖、NVIDIA RTX Video 超分辨率和全新的 NVFP4 模型，AI 驅(qū)動的視頻生成更加易用。

游戲開發(fā)者和設(shè)計師正在構(gòu)建電影級的游戲世界與標(biāo)志性的角色，不斷提升基于 NVIDIA RTX AI PC 的沉浸式體驗標(biāo)準(zhǔn)。

在本周于舊金山舉行的游戲開發(fā)者大會（GDC）上，NVIDIA 宣布了一系列更新，旨在借助 RTX GPU 和 NVIDIA DGX Spark 桌面超級計算機，加速并簡化用于概念設(shè)計和分鏡創(chuàng)作的 AI 視頻生成工作流。

這些發(fā)布內(nèi)容包括：

• ComfyUI 推出全新的應(yīng)用視圖，采用更簡化的界面，降低這款熱門生成式 AI 工具的使用門檻。
• RTX Video 超分辨率現(xiàn)已支持 ComfyUI，適用于將生成的視頻實時升級至 4K 分辨率。開發(fā)者也可通過 Python Wheel 安裝。
• Lightricks 的 LTX-2.3 和 Black Forest Labs 的 FLUX.2 Klein 模型，發(fā)布 NVFP4 和 FP8 模型變體，實現(xiàn)最高可達(dá) 2.5 倍性能提升并降低 60% 的顯存占用。

無縫本地 AI：協(xié)作、優(yōu)化、自定義

許多熱門的 AI 應(yīng)用已經(jīng)讓初學(xué)者更容易在筆記本電腦或臺式機上直接嘗試最先進(jìn)的模型。

對于不熟悉節(jié)點工作流的設(shè)計師來說，ComfyUI 全新的應(yīng)用視圖，通過簡化界面來呈現(xiàn)工作流。用戶只需輸入提示詞、調(diào)整簡單參數(shù)并點擊生成即可。完整的節(jié)點工作流體驗仍然以節(jié)點視圖形式保留，用戶可以在兩種模式之間無縫切換。

應(yīng)用視圖與 ComfyUI 中的 RTX 優(yōu)化完全兼容。自 9 月以來，RTX GPU 的體驗性能已提升 40%，同時 ComfyUI 現(xiàn)已原生支持 NVFP4 和 FP8 數(shù)據(jù)格式。綜合來看，在 NVIDIA GeForce RTX 50 系列 GPU 上使用 NVFP4 格式時，性能最高可提升 2.5 倍并減少 60% 的顯存占用。使用 FP8 時，性能最高可提升 1.7 倍并減少 40% 的顯存占用。

更快的 4K 視頻生成

獲得高質(zhì)量視頻輸出通常需要在三個限制條件之間進(jìn)行權(quán)衡：速度、顯存占用和可控制性。藝術(shù)家希望最終能獲得 4K 高質(zhì)量視頻，但大多數(shù)情況下會先生成更小、更快的預(yù)覽，然后再進(jìn)行分辨率提升。目前的分辨率提升功能（Upscaler）將一段 10 秒的視頻提升到 4K 分辨率通常需要數(shù)分鐘時間。

現(xiàn)在，用戶可以通過 NVIDIA RTX Video 超分辨率快速將生成的視頻提升到 4K，該功能已作為 ComfyUI 的一個節(jié)點提供。RTX Video 可以作為獨立節(jié)點使用，用于從零構(gòu)建視頻工作流。NVIDIA 為 AI 開發(fā)者發(fā)布了一個免費的 Python 軟件包，可通過 PyPI 倉庫獲取，并提供示例腳本以便快速上手。

以上為摘要內(nèi)容，復(fù)制下方鏈接前往閱讀完整內(nèi)容：

https://blogs.nvidia.cn/blog/rtx-ai-garage-flux-ltx-video-comfyui-gdc/?sessionid=-511191539