Video-to-Video (Videodan Videoya)

Video-to-video, mevcut bir klibi orijinal hareketini koruyarak yeni bir stille ya da yeni içerikle yeniden üretir — bir telefon kaydını anime sahnesine çevirmek, bir ürün tanıtımını yeniden stillendirmek ya da her karede arka planı değiştirmek gibi. Hareketi sıfırdan uyduran text-to-video'nun aksine, video-to-video kaynak görüntünüze koşullanır, böylece zamanlama ve kamera hareketi olduğu gibi kalır. İşin zor kısmı kareleri tutarlı tutmaktır: kare kare naif işleme titreşim yaratır, bu yüzden araçlar görünümü zaman içinde sabit tutmak için zamansal koşullandırma (çoğunlukla ControlNet tarzı yönlendirme ya da optik akış) kullanır. Pazarlama, oyun veya yaratıcı araçlar alanındaki SaaS geliştiricileri için yeniden çekim yapmadan varyasyon üretmenin hızlı bir yoludur. Pratik not: işlem gücü açısından ağırdır ve hızlı harekette ve yüzlerde hâlâ bozulmaya eğilimlidir, bu yüzden uzun metrajlı görüntüden çok kısa, kontrollü kliplere uygundur. Runway gibi araçlar bunu sunar; titreşimi dizginlemek için istemler ve güç (strength) ayarları üzerinde denemeler yapmayı bekleyin.