Inpainting (İç Boyama)

Inpainting, bir görselin maskelenmiş (seçilmiş) bölgesini yeniden oluşturan veya değiştiren, geri kalanına dokunmayan bir yapay zeka görsel düzenleme tekniğidir; model, çevredeki piksellerle ışık, doku ve perspektif açısından kusursuzca kaynaşan yeni içerik üretir. Difüzyon tabanlı inpainting modelleri özellikle maskeli-yeniden-oluşturma görevi için eğitilir: eğitim sırasında görsellerin rastgele bölgeleri karartılır ve model, görünen çevreye (ve yönlendirmeli inpainting'de, orada ne belirmesi gerektiğini anlatan bir komuta/istem'e) bağlı olarak eksik alan için makul içerik tahmin etmeyi öğrenir. "Outpainting" ise bunun tersi/uzantısıdır — orijinal görselin sınırlarının ötesine yeni içerik üreterek tuvali genişletir; bu, kare bir ürün fotoğrafını konuyu kırpmadan geniş bir banner'a dönüştürmek için kullanışlıdır. SaaS geliştiricileri için neden önemli: inpainting, "nesne kaldır" fotoğraf düzenleme özelliklerinin (kareye giren yabancı birini, bir elektrik telini, bir filigranı kaldırma), ürün fotoğrafı temizleme araçlarının (dikkat dağıtan arka plan öğesini kaldırma) ve kullanıcıların bir bölge seçip yerine ne istediklerini yazabildiği yaratıcı düzenleme uygulamalarının ("gökyüzünü gün batımıyla değiştir") arkasındaki motordur. Ayrıca veri seti temizliğinde ve arşivsel fotoğraf restorasyon ürünlerinde hasarlı veya örtülü bölgeleri onarmak için savunma amaçlı/olumlu şekilde de kullanılır. Somut bir örnek — "arka plan dağınıklığını kaldır" sunan bir vesikalık fotoğraf düzenleme SaaS'ı: (1) kullanıcı, dağınık bir ev ofisinde çekilmiş bir portre fotoğrafı yükler; (2) uygulama, konuyu tespit etmek için bir otomatik segmentasyon modeli çalıştırır ve kişi dışındaki her şeyi kapsayan ters bir maske oluşturur, ardından maske sınırının sert, pürüzlü bir çizgi olmaması için birkaç piksellik kenar yumuşatma uygular; (3) inpainting API'sini çağırır: görsel, maske ve "temiz, yumuşak bulanık nötr gri stüdyo arka planı, profesyonel vesikalık ışıklandırması" komutuyla `POST /v1/inpaint`; (4) model, maskelenmiş bölgeyi orijinal fotoğrafın ışık yönü ve renk sıcaklığıyla uyumlu, makul ve kusursuzca harmanlanmış bir stüdyo fonuyla doldurur, böylece konu uyumsuz bir arka plana yapıştırılmış gibi görünmez; (5) sonuç birkaç saniye içinde döner ve uygulama, aynı temel fotoğraftan üretilmiş 2-3 arka plan stil ön ayarı (düz gri, yumuşak ofis bulanıklığı, dış mekân bokehi) sunar. Maske kalitesi, çıktı kalitesinin en büyük belirleyicisidir — sert sınırlı özensiz maske kenarları, konunun etrafında görünür dikişlere veya hâle artefaktlarına yol açar; bu yüzden üretim araçları, segmentasyon ve yumuşatma adımına özellikle yatırım yapar, bunu inpainting çağrısından önceki bir formalite olarak görmez.