This is a simple multi model workflow I use to generate short videos.
Profil d'exécution
Description de la source
This is a simple multi model workflow I use to generate short videos.
Text2Images2Videos2Video.
1 - FLUX to create 3 similar images from similar prompts
2 - CogVideoX 1.5 5B I2V to create two "interpolations" between those images
3 - Hunyuan V2V to solve inconsistencies and sudden changes in the video, specially in the background.
https://github.com/chengzeyi/Comfy-WaveSpeed
This version uses WaveSpeed to accelerate both FLUX and Hunyuan. Comfy probably won't find it as a Missing Node, make sure to follow install instructions from the link above.
Commentaire généré par l’IA
Explication générée par l’IA à partir des détails de la source et de la configuration. Les suggestions sont clairement signalées.
Use this workflow to turn similar text prompts into short videos: FLUX creates three similar images, CogVideoX 1.5 5B I2V creates two interpolations between them, and Hunyuan V2V addresses inconsistencies and sudden background changes.
The described sequence goes from prompts to three images, then to two interpolations, followed by Hunyuan V2V processing.
Input similar text prompts for FLUX.
Intermediate results are three similar images and two interpolations between them.
The final output is a short video processed with Hunyuan V2V.
Follow the Comfy-WaveSpeed installation instructions linked in the description; Comfy may not identify WaveSpeed as a missing node.
Suggestion · non vérifié
Listed model files: ae.safetensors, clip_l.safetensors, CogVideoX_5b_1_5_I2V_GGUF_Q4_0.safetensors, hunyuan_video_t2v_720p_bf16.safetensors, hunyuan_video_vae_bf16.safetensors, jibMixFlux_v72PixelHeaven.safetensors, llava_llama3_fp8_scaled.safetensors, and t5xxl_fp8_e4m3fn.safet
Node names include UNETLoader, VAEDecode, ModelSamplingSD3, VAEEncodeTiled, VAELoader, RandomNoise, GetNode, Seed (rgthree), Fast Groups Bypasser (rgthree), EmptySD3LatentImage, CLIPTextEncode, SetNode, ApplyFBCacheOnModel, ModelSamplingFlux, DownloadAndLoadCogVideoGGUFModel, and
Additional node names include FluxGuidance, ImageBatchMulti, VHS_SelectImages, DualCLIPLoader, KSamplerSelect, VAEDecodeTiled, CLIPLoader, CogVideoImageEncode, PurgeVRAMNode, CogVideoTextEncode, SamplerCustomAdvanced, CogVideoSampler, BasicGuider, VHS_VideoCombine, INTConstant, a
The base model is Hunyuan Video, and the workflow combines FLUX, CogVideoX 1.5 5B I2V, and Hunyuan V2V stages.
This version uses WaveSpeed with both FLUX and Hunyuan.
This item is listed as a workflow, and no Pipe version is provided.
Before use, check that the listed model files and node names are available.
Suggestion · non vérifié
Before use, account for WaveSpeed’s increased VRAM use; the description reports only a 24GB run.
Suggestion · non vérifié
Faut-il modifier cela ?
Connectez-vous pour envoyer une demande de modification.
Sources
1 sourceExtraits de sources
1 extraitSource context: 1012 downloads · Type Workflows · Base model Hunyuan Video
WaveSpeed comes with the cost of increased VRAM usage.
So far I have only been able to run this workflow with 24GB.
Estimation des besoins VRAM
Estimation indisponible
4,79 GB sur 2 de 14 fichiers de modèle. Total des fichiers du modèle + 25 % de surcharge de chargement + 2 Go de tampon d'exécution, arrondi à l'unité supérieure.
Exigences
Exigences 43VAE · Unknown
Text encoder · 235 MB · SAFETENSORS · Unknown
CLIPLoader
Non résoluText encoder · Unknown
CogVideoX_5b_1_5_I2V_GGUF_Q4_0.safetensors
Non résoluCheckpoint · Unknown
DualCLIPLoader
Non résoluText encoder · Unknown
hunyuan_video_t2v_720p_bf16.safetensors
Fichier non vérifiéCheckpoint · SAFETENSORS · Unknown
hunyuan_video_vae_bf16.safetensors
PossibleVAE · Unknown
jibMixFlux_v72PixelHeaven.safetensors
Non résoluCheckpoint · Unknown
llava_llama3_fp8_scaled.safetensors
ConflitText encoder · Unknown
Text encoder · 4.56 GB · SAFETENSOR · fp8 · Unknown
VAEDecode
Non résoluVAE · Unknown
VAEDecodeTiled
Non résoluVAE · Unknown
VAEEncodeTiled
Non résoluVAE · Unknown
VAELoader
Non résoluVAE · Unknown
ApplyFBCacheOnModel
Non résoluPack de nœud · Unknown
BasicGuider
Non résoluPack de nœud · Unknown
BasicScheduler
Non résoluPack de nœud · Unknown
Pack de nœud · Unknown
CogVideoDecode
Non résoluPack de nœud · Unknown
CogVideoImageEncode
Non résoluPack de nœud · Unknown
CogVideoSampler
Non résoluPack de nœud · Unknown
CogVideoTextEncode
Non résoluPack de nœud · Unknown
DownloadAndLoadCogVideoGGUFModel
Non résoluPack de nœud · Unknown
EmptySD3LatentImage
Non résoluPack de nœud · Unknown
Fast Groups Bypasser (rgthree)
Non résoluPack de nœud · Unknown
FILM VFI
Non résoluPack de nœud · Unknown
FluxGuidance
Non résoluPack de nœud · Unknown
GetNode
Non résoluPack de nœud · Unknown
ImageBatch
Non résoluPack de nœud · Unknown
ImageBatchMulti
Non résoluPack de nœud · Unknown
INTConstant
Non résoluPack de nœud · Unknown
KSamplerSelect
Non résoluPack de nœud · Unknown
ModelSamplingFlux
Non résoluPack de nœud · Unknown
ModelSamplingSD3
Non résoluPack de nœud · Unknown
PreviewImage
Non résoluPack de nœud · Unknown
PurgeVRAMNode
Non résoluPack de nœud · Unknown
RandomNoise
Non résoluPack de nœud · Unknown
SamplerCustomAdvanced
Non résoluPack de nœud · Unknown
Seed (rgthree)
Non résoluPack de nœud · Unknown
SetNode
Non résoluPack de nœud · Unknown
UNETLoader
Non résoluPack de nœud · Unknown
VHS_SelectImages
Non résoluPack de nœud · Unknown
VHS_VideoCombine
Non résoluPack de nœud · Unknown