Bidirectional SAM2 Tracking for Video Inpainting in ComfyUI

Bidirectional SAM2 Tracking for Video Inpainting in ComfyUI — on a 16GB Laptop GPU

A local, open-source pipeline for replacing a subject’s head in a moving video shot, and the SAM2 patch that makes bidirectional mask tracking possible.

A few months ago I published an open-source project on GitHub: ComfyUI-Bidirectional-SAM2-Inpaint. It is an automated video inpainting pipeline built on ComfyUI, combining Wan 2.1 VACE, SAM2 and Qwen2.5-VL, designed to process long shots on limited hardware — the reference machine is a laptop with a 16GB RTX 3080. This post documents how the pipeline works, why the SAM2 tracker had to be patched to propagate in both directions, and the workflow practices that determine the quality of the result.

Covid-19 maze-times

covid-19 maze-times

v-gif-test

vezer_Red
a .gif animation about the logo of ‘Vezer’ software

OBJECT MAPPING WORKSHOP

OBJECT MAPPING WORKSHOP

Időtartam: 4 nap (6×45 perc / nap)
Résztvevők száma: 10
Dátum: 2013. október 8-11. (minden nap: 15:00-20:00)
Nyelv: magyar
Szint: haladó

Oktatók: Vicsek Viktor, Kovács Ivó, Ferenczi Zola

Az Object Mapping a Video Projection Mapping egy irányzata. Felhasználási területei többek között színpadi díszletek, videóstúdió felvétel hátterek, speciális filmes effektek, művészeti installációk. A workshopon a résztvevők egy projekt összeállításán keresztül megtanulják a 3 dimenziós szoftverben a virtuális tér kezelését, a kamera pontos beállítását, a valós objekt 3 dimenziós modelljének textúrázásását, modulálását, az animáció renderelését, melyet a workshop végén a valós térben az erre alkalmas szoftverekkel projektoros vetítés formájában bemutatnak.

www.avopenstudios.com

20131006-221307.jpg