📢 转载信息
原文链接:https://blogs.nvidia.com/blog/rtx-ai-garage-flux-ltx-video-comfyui-gdc/
原文作者:Michael Fukuyama
游戏开发者和艺术家们正在构建电影般的世界和标志性的角色——在NVIDIA RTX AI PC上提升沉浸式体验的标准。
在本周于旧金山举行的游戏开发者大会(GDC)上,NVIDIA宣布了一系列更新,这些更新旨在简化RTX GPU和NVIDIA DGX Spark桌面超级计算机上的概念开发和故事板制作的AI视频生成流程。
这些公告包括:
- ComfyUI的新App View,具有简化的界面,降低了这一流行的生成式AI工具的入门门槛。
- RTX Video Super Resolution可用于ComfyUI,这是一款理想的实时4K升频器,专为视频生成而设计——也可作为Python Wheel供开发者使用。
- FLUX.2 Klein现已提供NVFP4和FP8模型变体,LTX-2.3的NVFP4支持即将推出,为这两个模型提供高达2.5倍的性能提升和60%的内存使用量降低。
无摩擦的本地AI:协作、优化、定制
当今许多流行的AI应用程序使初学者更容易直接在笔记本电脑或台式机上尝试最先进的模型。
对于不熟悉节点图的艺术家来说,ComfyUI的新App View在简化的界面中呈现了工作流程。用户只需输入提示、调整简单参数并点击生成即可。完整的节点式体验仍然可在Node View中使用,用户可以在两种模式之间无缝切换。
App View与ComfyUI中的RTX优化兼容。自9月以来,RTX GPU的性能提升了40%,ComfyUI现在原生支持NVFP4和FP8数据格式。总而言之,使用NVIDIA GeForce RTX 50系列GPU的NVFP4格式,性能提升了2.5倍,VRAM减少了60%;使用FP8,性能提升了1.7倍,VRAM减少了40%。
在1月份的CES展会上,NVIDIA宣布了多款支持NVFP4和FP8的版本。现在,更多NVFP4和FP8模型已可用于ComfyUI——包括即将支持NVFP4的LTX-2.3,以及FLUX.2 Klein 4B和FLUX.2 Klein 9B——均直接集成在ComfyUI中。要开始使用,请直接从Hugging Face下载NVFP4和FP8检查点,通过Template Browser在ComfyUI中加载默认工作流,然后将默认模型检查点替换为新下载的检查点。
App View模式现已可用。更多信息请访问ComfyUI。
更快的4K视频生成
获得高质量的视频输出通常需要在速度、VRAM和控制这三个方面进行权衡。虽然许多艺术家最终想要4K质量,但大多数人更倾向于先生成较小、更快的预览,然后再进行升频。如今的升频器需要数分钟才能将10秒的剪辑升频到4K分辨率。
现在,用户可以通过NVIDIA RTX Video Super Resolution,作为ComfyUI的一个节点,快速将生成的视频升频到4K。RTX Video可以作为一个独立的节点使用,用于从头开始构建视频工作流。
对于AI开发者,NVIDIA通过PyPI仓库发布了一个免费的Python软件包,并提供了GitHub上的示例代码以及VFX Python绑定指南,以便快速上手。该软件包提供了对驱动RTX Video的相同AI升频技术的编程访问,直接在RTX GPU Tensor Cores上运行,与流行的本地升频器相比,4K升频速度提高了30倍,VRAM成本也大大降低。该软件包由NVIDIA Video Effects软件开发套件提供支持。
准备好开始使用ComfyUI了吗?请观看由视觉效果艺术家Max Novak主持的最新NVIDIA Studio Sessions教程,获取指导 walkthrough:
#ICYMI:GDC上RTX AI PC的最新更新
🎉于3月16日至19日在圣何塞举行的GTC大会上加入NVIDIA!参加3月17日的“在ComfyUI中为设计和可视化创建生成式AI工作流”课程,该课程由NVIDIA 3D工作流专家主讲,专注于为图像、视频、3D和PBR材质构建RTX加速的生成式工作流。立即注册并浏览课程目录。
💡LTX Desktop是一个完全本地的开源视频编辑器,直接运行在LTX引擎上,针对NVIDIA GPU和兼容硬件进行了优化。
🦥LM Link连接运行LM Studio的独立设备,允许模型在远程机器上运行,就像在本地一样。对于希望在笔记本电脑上运行代理但仍能访问免费私有AI(由DGX Spark或RTX桌面提供支持)的用户来说,这是一个理想的选择。了解如何在DGX Spark上运行LM Studio。
🎮在3月31日星期二,作为下一个可选的NVIDIA App beta版的一部分,将为GeForce RTX 50系列用户发布NVIDIA DLSS 4.5动态多帧生成和DLSS 4.5多帧生成6倍模式的覆盖。了解NVIDIA在GDC上的新闻。
🤖下个月,新的NVIDIA RTX Remix更新将引入高级粒子VFX,使modder能够创建广泛的粒子效果,进一步提高图像质量、细节和沉浸感。
🦄Topaz Labs与NVIDIA合作优化了NeuroStream在NVIDIA GPU上的运行——这是一种专有的VRAM优化技术,允许复杂的AI模型在消费级硬件上运行。
📃Microsoft引入了对VoiceMod的支持,这是首批启用Windows ML进行GPU推理的应用程序之一,与CPU相比,显著提高了性能语音质量。
在Facebook、Instagram、TikTok和X上接入NVIDIA AI PC——并通过订阅RTX AI PC新闻通讯来及时了解信息。在LinkedIn和X上关注NVIDIA Workstation。
请参阅关于软件产品信息的通知。
🚀 想要体验更好更全面的AI调用?
欢迎使用青云聚合API,约为官网价格的十分之一,支持300+全球最新模型,以及全球各种生图生视频模型,无需翻墙高速稳定,文档丰富,小白也可以简单操作。
评论区