Just rolled out a real-time inpainting pipeline using SAM2 and Comfystream , running on an 4090 via RunPod. Followed this guide to get runpod template and required models.
Laufzeitprofil
Quellenbeschreibung
Real-Time Inpainting Workflow
Just rolled out a real-time inpainting pipeline using SAM2 and Comfystream , running on an 4090 via RunPod. Followed this guide https://pipelines.livepeer.org/docs/technical/getting-started/install-comfystream#remote-gpu to get runpod template and required models.
Custom nodes:
SAM2 for segmentation: https://github.com/neverbiasu/ComfyUI-SAM2
KI-generierter Kommentar
KI-generierte Erklärung auf Grundlage von Quellen- und Konfigurationsdetails. Vorschläge sind klar gekennzeichnet.
Use this workflow to inpaint an input image: LoadImage names the image input, SAM2 handles segmentation, Crop Stitch and Impact Pack are the inpainting modules, and PreviewImage is the named preview output.
Other listed processing nodes include InpaintCropImproved, InpaintStitchImproved, KSampler, and VAEDecode.
LoadImage is the named image input, and PreviewImage is the named preview output.
The described setup uses Comfystream on a 4090 via RunPod and links a remote-GPU guide for the RunPod template and required models.
Named node packs include ComfyUI-SAM2, ComfyUI-Inpaint-CropAndStitch, and ComfyUI-Impact-Pack.
Other listed node packs are ComfyUI-Depth-Anything-Tensorrt, ComfyUI-Torch-Compile, ComfyUI-Stream-Pack, and ComfyUI_TensorRT.
Other listed node names are CLIPLoader; CLIPTextEncode; ControlNetApplyAdvanced; ControlNetLoader; DepthAnythingTensorrt; DifferentialDiffusion; FeatureBankAttentionProcessor; GroundingDinoModelLoader (segment anything2); GroundingDinoSAM2Segment (segment anything2); GrowMask; I
The listed base model is SD 1.5.
Before use, check that your local files include CLIPText/model.fp16.safetensors and control_v11f1p_sd15_depth_fp16.safetensors.
Vorschlag · nicht geprüft
Muss das bearbeitet werden?
Melden Sie sich an, um eine Änderungsanfrage zu senden.
Quellen
1 QuelleQuellenauszüge
1 AuszugSource context: 142 downloads · Type Workflows · Base model SD 1.5
Inpainting modules :
Impact Pack: https://github.com/ltdrdata/ComfyUI-Impact-Pack
I'll be sharing more real-time workflows soon— follow me on X to stay updated !
Geschätzter VRAM Bedarf
Schätzung nicht verfügbar
Die Modell-Dateigrößen sind noch nicht vollständig genug, um diese Anforderung zu berechnen.
Anforderungen
26 AnforderungenCLIPLoader
MöglichText encoder · Unknown
CLIPText/model.fp16.safetensors
Nicht aufgelöstText encoder · Hugging Face · CLIPText/model.fp16.safetensors
control_v11f1p_sd15_depth_fp16.safetensors
Nicht aufgelöstControlNet · Unknown
GroundingDinoModelLoader (segment anything2)
Datei ungeprüftSegmentation · Unknown · ComfyUI-SAM2
GroundingDinoSAM2Segment (segment anything2)
Datei ungeprüftSegmentation · Unknown · ComfyUI-SAM2
SAM2ModelLoader (segment anything2)
Datei ungeprüftSegmentation · Unknown · ComfyUI-SAM2
VAE · Unknown · ComfyUI-Torch-Compile
VAEDecode
MöglichVAE · Unknown
VAELoader
MöglichVAE · Unknown
CLIPTextEncode
MöglichKnotenpaket · Unknown
ControlNetApplyAdvanced
MöglichKnotenpaket · Unknown
ControlNetLoader
MöglichKnotenpaket · Unknown
Knotenpaket · Unknown
DifferentialDiffusion
Nicht aufgelöstKnotenpaket · Unknown
Knotenpaket · Unknown
GrowMask
MöglichKnotenpaket · Unknown
ImageResize+
MöglichKnotenpaket · Unknown
Knotenpaket · Unknown
Knotenpaket · Unknown
InpaintModelConditioning
MöglichKnotenpaket · Unknown
Knotenpaket · Unknown
KSampler
MöglichKnotenpaket · Unknown
LoadImage
MöglichKnotenpaket · Unknown
PreviewImage
MöglichKnotenpaket · Unknown
Knotenpaket · Unknown
Knotenpaket · Unknown