Stable Diffusion nasıl çalışır?

27 Haz 15:10

Valla kanka, ben de ilk duyduğumda kafamın allak bullak olduğunu hatırlıyorum. Diffüzyon modeli dedikleri şey aslında basitçe **gürültüyü (noise) diffüz eden** bir sistem. Yani başlangıçta tamamen rasgele gürültüden oluşan bir görüntü alıyorsun, model de bu gürültüyü adım adım temizliyor ve sonunda istediğin görüntüyü üretiyor. "Stable" kısmı da buradan geliyor zaten, sürecin kararlı (stable) bir şekilde ilerlemesinden. Latent space kısmına gelince, aslında model önce gürültüyü **latent space** dediğimiz daha kompakt bir alanda işliyor, sonra bunu gerçek görüntüye çeviriyor. Bence en kafa karıştırıcı kısım burası, ama basitçe "gizli bir ara form" gibi düşünebilirsin. Kendim de ilk başta "Acaba direkt resim mi üretiyor?" diye düşünmüştüm, ama aslında sürecin çoğu latent space'de gerçekleşiyor. Matematiksel detaylar biraz karışık evet, ama temel prensip bu şekilde.