首页 > 人工智能 > 人工智能 > 替换一个节点,ComfyUI 瞬间起飞
在当今人工智能快速发展的时代,图像和视频生成技术已从科研前沿走向实际应用。从创意产业的广告制作、内容生成,到工业设计的可视化,再到医学影像辅助诊断和虚拟内容制作,扩散模型(Diffusion Model)正在为各个行业创造前所未有的价值。
然而,这种应用的广泛化也带来了新的挑战:随着模型规模的不断增大,推理时间随之增加,用户对生成速度的期待与硬件性能之间的矛盾日益凸显。同时,复杂的推理优化配置也为普通用户设置了较高的技术门槛,制约了这些强大技术的普及。
在 AI 生成领域,推理性能的提升直接决定用户体验的质量。 FunArt 作为阿里云函数计算提供的一键托管 ComfyUI 应用平台,致力于为用户提供开箱即用的先进 DiT 推理引擎能力,持续提升图像/视频生成性能。此前,FunArt 已相继集成 Nunchaku 和 DeepGPU 两款 DiT 推理引擎,让用户无需繁琐配置即可享受加速推理的红利。
现在,FunArt 再次集成新引擎—— VisionPlaid。VisionPlaid 是阿里云基础软件团队推出的一款专为视觉扩散模型(Diffusion Model)设计的高性能推理加速框架,深度整合前沿技术,提供对 ComfyUI 的原生支持,为多款模型提供极 致的推理体验。
FunArt 在推理加速领域的演进历程反映了一个重要理念: 单一的加速方案无法满足所有场景需求,只有不断集成最新技术,才能为用户提供真正的极 致体验。
FunArt 是阿里云函数计算提供的一键托管 ComfyUI 应用平台,提供从项目开发到 API 调用的全生命周期管理能力。

VisionPlaid 的出现标志着推理加速技术的一个重要突破。与传统的加速方案相比,VisionPlaid 采取了全新的技术路线,既保证了与现有生态(ComfyUI)的无缝兼容,又通过创新的算法和架构实现了显著的性能提升。这种"兼容性与性能并重"的设计思想,正是 VisionPlaid 能够快速被 FunArt 采纳的原因。
comfyui-multigpu 等仅通过分布式 Offload 来节省内存的项目,VisionPlaid 实现了
真正的序列并行(Sequence Parallelism, SP)加速。我们不仅能让你跑起来大模型,更能通过多卡协同计算,显著缩短单图/单视频的生成时间。Async Offload,并将并行加速与
4-bit 量化 完美结合(Insane!)。这种组合拳让单张大图或长视频的端到端(E2E)生成速度直达硬件极限。SGL-Diffusion 那样用后端服务接管,直接复用社区生态。xDiT 等独立框架,VisionPlaid 融入原生态工作流,你可以继续使用你喜爱的各种自定义节点和插件。VisionPlaid 通过软硬件协同优化,在保持模型精度的前提下突破推理性能瓶颈。
Int4 与
NVFP4,在极 致压缩显存的同时确保生成质量。SageAttention、
FlashAttention 及
SDPA 无重启自由切换。torch.compile 与自定义融合算子,榨干硬件性能。在与当前业界 SOTA 项目的横向对比中,VisionPlaid 在 Transformer 单步时间和端到端延迟上均展现了显著优势。
VisionPlaid 的性能优势不仅体现在原始数字上,更重要的是这些性能提升对实际应用的影响。在视频生成领域,与 Diffusers 相比 1.6 倍的单卡加速意味着生成一段视频的时间从 499 秒降至 308 秒,减少了 191 秒的等待时间——这对于需要快速迭代的创意工作者而言是巨大的生产力提升。在双卡配置下,2.5 倍的加速将时间进一步压缩到 200 秒,使得原本需要 8 分钟的任务降至 3 分钟,这在生产环境中可以显著提升吞吐量。

| 框架名称 | GPUs | Step Time | End-To-End Time | Speedup |
|---|---|---|---|---|
| Diffusers | 1 | 24.03 s/it | 499.47 s | 1x |
| LightX2V | 1 | 20.41 s/it | 465.00 s | 1.07x |
| xDiT | 1 | 32.80 s/it | 670.23 s | - |
| FastVideo | 1 | 22.75 s/it | 466.43 s | 1.07x |
| SGL Diffusion | 1 | 15.41 s/it | 324.10 s | 1.5x |
| VisionPlaid | 1 | 14.98 s/it | 308.11 s | 1.6x |
| LightX2V | 2 | 13.01 s/it | 268.81 s | 1.8x |
| xDiT | 2 | OOM | - | - |
| FastVideo | 2 | 14.73 s/it | 306.28 s | 1.6x |
| SGL Diffusion | 2 | 12.57 s/it | 285.21 s | 1.8x |
| VisionPlaid | 2 | 8.74 s/it | 200.60 s | 2.5x |
测试环境:[Wan 2.1 T2V 14B,4090,20 steps,81 frames,480P (480x848),SageAttention,BF16]
注:xDiT 未接入 SageAttention,因此省略 Speedup 信息;2 卡时疑似 cpu offload 和 parallel 冲突导致 OOM
在图片生成领域,VisionPlaid 展现出了对不同精度配置的优异适应能力。即使在 fp8 低精度下仍能保持 1.10 倍的性能优势,说明 VisionPlaid 的优化不仅限于高精度场景,对于成本敏感的应用同样有效。在极端的 4-step 超快速生成配置下,VisionPlaid 能够在 3.51 秒内完成一张 1024x1024 图像的生成,这使得实时或近实时的交互式生成成为了可能。
| 框架名称 | 权重 | GPUs | Step Time | End-To-End Time | Speedup |
|---|---|---|---|---|---|
| Diffusers | bf16 | 1 | - | OOM | - |
| LightX2V | bf16 | 1 | 3.23 s/it | 65.63 s | 1x |
|
|
fp8 | 1 | 1.62 s/it | 33.83 s | 1x |
|
|
4steps+fp8 | 1 | 0.81 s/it | 4.10 s | 1x |
| xDiT | bf16 | 1 | - | OOM | - |
| SGL Diffusion | bf16 | 1 | - | OOM | - |
| VisionPlaid | bf16 | 1 | 2.97 s/it | 60.95 s | 1.08x vs LightX2V |
|
|
fp8 | 1 | 1.51 s/it | 30.73 s | 1.10x vs LightX2V |
|
|
4steps+fp8 | 1 | 0.71 s/it | 3.51 s | 1.17x vs LightX2V |
测试环境:[Qwen-Image-2512,4090,20 steps or 4 steps,1024x1024,SageAttention]
注:4-step 配置中使用了 CFG=1.0 的推荐配置;xDiT 和 SGLD 未支持 fp8
最为值得关注的是 int4 超低精度配置下的性能表现。VisionPlaid + SageAttention 在单卡上达到了 2.0 倍的加速,在双卡上甚至能达到 2.7 倍,这意味着用户可以在消费级显卡上实现图片和视频的实时或准实时生成,同时显著降低推理成本。这对于没有高端 GPU 资源的开发者和企业而言,具有重要的实际意义,使其能够以更低的投入成本部署和运营 AI 生成应用。
| 框架名称 | 权重 | GPUs | Step Time | End-To-End Time | Speedup* |
|---|---|---|---|---|---|
| ComfyUI | bf16 | 1 | 9.04 s/it | 188.39 s | 0.69x |
|
|
4steps+bf16 | 1 | 4.38 s/it | 24.40 s | 0.56x |
| Nunchaku | int4 | 1 | 6.42 s/it | 129.46 s | 1x |
|
|
4steps+int4 | 1 | 3.19 s/it | 13.73 s | 1x |
| VisionPlaid + default attention | int4 | 1 | 5.96 s/it | 121.65 s | 1.06x |
|
|
4steps+int4 | 1 | 2.84 s/it | 12.97 s | 1.06x |
| VisionPlaid + sage attention | int4 | 1 | 3.16 s/it | 64.92 s | 2.0x |
|
|
4steps+int4 | 1 | 1.49 s/it | 7.24 s | 1.9x |
| VisionPlaid + default attention | int4 | 2 | 3.77 s/it | 77.07 s | 1.7x |
|
|
4steps+int4 | 2 | 1.97 s/it | 9.23 s | 1.5x |
| VisionPlaid + sage attention | int4 | 2 | 2.29 s/it | 47.17 s | 2.7x |
|
|
4steps+int4 | 2 | 1.24 s/it | 6.04 s | 2.3x |
测试环境:[Qwen-Image-Edit-2509,4090,20 steps or 4 steps,1440x1920,ComfyUI 默认启动参数]
注:4-step 配置中使用了 CFG=1.0 的推荐配置;* Speedup 分别以 Nunchaku 的两个结果为基准,即 int4 以 int4 为基准,4steps+int4 以 4steps+int4 为基准;** VisionPlaid 的一个优势在于默认可以无重启切换 SageAttention,适合一些长期运行,workload 不固定的 ComfyUI 服务(比如阿里云 FC),这个配置利用了这一点
FunArt 对 VisionPlaid 做了深度集成,包括:

2.切换到 项目 tab,选择 创建新项目;
3.在新打开的 创建新项目页面,



2.选择您想要运行的工作流,点击右上角的 Run 按钮,就可以开始运行推理了。
VisionPlaid 通过序列并行加速、原生生态兼容和智能显存管理等创新技术,为用户带来了性能与易用性的完美结合。
无论是需要实时交互的应用场景,还是对生成质量有高要求的长流程任务,FunArt 结合 VisionPlaid 都提供了最优的解决方案。用户无需进行复杂的配置或优化,仅需几次点击就能启动一个高性能的 AI 生成服务,充分体现了 FunArt 的"开箱即用"。
FunArt 快速入门: https://help.aliyun.com/zh/functioncompute/fc/introduction-to-image-generation-applications
FunArt 自定义部署: https://functionai.console.aliyun.com/funart/cn-hangzhou/explore
来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/69981534/viewspace-3114361/ ,如需转载,请注明出处,否则将追究法律责任。