This is a simple multi model workflow I use to generate short videos.
Laufzeitprofil
Quellenbeschreibung
This is a simple multi model workflow I use to generate short videos.
Text2Images2Videos2Video.
1 - FLUX to create 3 similar images from similar prompts
2 - CogVideoX 1.5 5B I2V to create two "interpolations" between those images
3 - Hunyuan V2V to solve inconsistencies and sudden changes in the video, specially in the background.
https://github.com/chengzeyi/Comfy-WaveSpeed
This version uses WaveSpeed to accelerate both FLUX and Hunyuan. Comfy probably won't find it as a Missing Node, make sure to follow install instructions from the link above.
KI-generierter Kommentar
KI-generierte Erklärung auf Grundlage von Quellen- und Konfigurationsdetails. Vorschläge sind klar gekennzeichnet.
Use this workflow to turn similar text prompts into short videos: FLUX creates three similar images, CogVideoX 1.5 5B I2V creates two interpolations between them, and Hunyuan V2V addresses inconsistencies and sudden background changes.
The described sequence goes from prompts to three images, then to two interpolations, followed by Hunyuan V2V processing.
Input similar text prompts for FLUX.
Intermediate results are three similar images and two interpolations between them.
The final output is a short video processed with Hunyuan V2V.
Follow the Comfy-WaveSpeed installation instructions linked in the description; Comfy may not identify WaveSpeed as a missing node.
Vorschlag · nicht geprüft
Listed model files: ae.safetensors, clip_l.safetensors, CogVideoX_5b_1_5_I2V_GGUF_Q4_0.safetensors, hunyuan_video_t2v_720p_bf16.safetensors, hunyuan_video_vae_bf16.safetensors, jibMixFlux_v72PixelHeaven.safetensors, llava_llama3_fp8_scaled.safetensors, and t5xxl_fp8_e4m3fn.safet
Node names include UNETLoader, VAEDecode, ModelSamplingSD3, VAEEncodeTiled, VAELoader, RandomNoise, GetNode, Seed (rgthree), Fast Groups Bypasser (rgthree), EmptySD3LatentImage, CLIPTextEncode, SetNode, ApplyFBCacheOnModel, ModelSamplingFlux, DownloadAndLoadCogVideoGGUFModel, and
Additional node names include FluxGuidance, ImageBatchMulti, VHS_SelectImages, DualCLIPLoader, KSamplerSelect, VAEDecodeTiled, CLIPLoader, CogVideoImageEncode, PurgeVRAMNode, CogVideoTextEncode, SamplerCustomAdvanced, CogVideoSampler, BasicGuider, VHS_VideoCombine, INTConstant, a
The base model is Hunyuan Video, and the workflow combines FLUX, CogVideoX 1.5 5B I2V, and Hunyuan V2V stages.
This version uses WaveSpeed with both FLUX and Hunyuan.
This item is listed as a workflow, and no Pipe version is provided.
Before use, check that the listed model files and node names are available.
Vorschlag · nicht geprüft
Before use, account for WaveSpeed’s increased VRAM use; the description reports only a 24GB run.
Vorschlag · nicht geprüft
Muss das bearbeitet werden?
Melden Sie sich an, um eine Änderungsanfrage zu senden.
Quellen
1 QuelleQuellenauszüge
1 AuszugSource context: 1012 downloads · Type Workflows · Base model Hunyuan Video
WaveSpeed comes with the cost of increased VRAM usage.
So far I have only been able to run this workflow with 24GB.
Geschätzter VRAM Bedarf
Schätzung nicht verfügbar
4,79 GB über 2 von 14 Modell-Dateien. Gesamtmodell-Dateien + 25% Ladeaufwand + 2 GB Ausführungs-Puffer, aufgerundet.
Anforderungen
43 AnforderungenVAE · Unknown
Text encoder · 235 MB · SAFETENSORS · Unknown
CLIPLoader
Nicht aufgelöstText encoder · Unknown
CogVideoX_5b_1_5_I2V_GGUF_Q4_0.safetensors
Nicht aufgelöstCheckpoint · Unknown
DualCLIPLoader
Nicht aufgelöstText encoder · Unknown
hunyuan_video_t2v_720p_bf16.safetensors
Datei ungeprüftCheckpoint · SAFETENSORS · Unknown
hunyuan_video_vae_bf16.safetensors
MöglichVAE · Unknown
jibMixFlux_v72PixelHeaven.safetensors
Nicht aufgelöstCheckpoint · Unknown
llava_llama3_fp8_scaled.safetensors
KonfliktText encoder · Unknown
Text encoder · 4.56 GB · SAFETENSOR · fp8 · Unknown
VAEDecode
Nicht aufgelöstVAE · Unknown
VAEDecodeTiled
Nicht aufgelöstVAE · Unknown
VAEEncodeTiled
Nicht aufgelöstVAE · Unknown
VAELoader
Nicht aufgelöstVAE · Unknown
ApplyFBCacheOnModel
Nicht aufgelöstKnotenpaket · Unknown
BasicGuider
Nicht aufgelöstKnotenpaket · Unknown
BasicScheduler
Nicht aufgelöstKnotenpaket · Unknown
Knotenpaket · Unknown
CogVideoDecode
Nicht aufgelöstKnotenpaket · Unknown
CogVideoImageEncode
Nicht aufgelöstKnotenpaket · Unknown
CogVideoSampler
Nicht aufgelöstKnotenpaket · Unknown
CogVideoTextEncode
Nicht aufgelöstKnotenpaket · Unknown
DownloadAndLoadCogVideoGGUFModel
Nicht aufgelöstKnotenpaket · Unknown
EmptySD3LatentImage
Nicht aufgelöstKnotenpaket · Unknown
Fast Groups Bypasser (rgthree)
Nicht aufgelöstKnotenpaket · Unknown
FILM VFI
Nicht aufgelöstKnotenpaket · Unknown
FluxGuidance
Nicht aufgelöstKnotenpaket · Unknown
GetNode
Nicht aufgelöstKnotenpaket · Unknown
ImageBatch
Nicht aufgelöstKnotenpaket · Unknown
ImageBatchMulti
Nicht aufgelöstKnotenpaket · Unknown
INTConstant
Nicht aufgelöstKnotenpaket · Unknown
KSamplerSelect
Nicht aufgelöstKnotenpaket · Unknown
ModelSamplingFlux
Nicht aufgelöstKnotenpaket · Unknown
ModelSamplingSD3
Nicht aufgelöstKnotenpaket · Unknown
PreviewImage
Nicht aufgelöstKnotenpaket · Unknown
PurgeVRAMNode
Nicht aufgelöstKnotenpaket · Unknown
RandomNoise
Nicht aufgelöstKnotenpaket · Unknown
SamplerCustomAdvanced
Nicht aufgelöstKnotenpaket · Unknown
Seed (rgthree)
Nicht aufgelöstKnotenpaket · Unknown
SetNode
Nicht aufgelöstKnotenpaket · Unknown
UNETLoader
Nicht aufgelöstKnotenpaket · Unknown
VHS_SelectImages
Nicht aufgelöstKnotenpaket · Unknown
VHS_VideoCombine
Nicht aufgelöstKnotenpaket · Unknown