Latent Diffusion Model

نموذج الانتشار الكامن

الاختصار: LDM

التعريف

نموذج انتشار يعمل في فضاء كامن مضغوط بدل فضاء البكسلات، فيخفض الكلفة كثيراً.

يضغط مشفِّر ذاتي الصورة إلى تمثيل كامن، ويجري الانتشار وإزالة الضوضاء هناك، ثم يعيد فك المشفِّر الصورة. يُشرَّط بالنص عبر الانتباه المتقاطع، وعليه يقوم Stable Diffusion.

Definition

A latent diffusion model runs the diffusion process in a compressed latent space learned by an autoencoder, greatly reducing compute while retaining quality.

شرح مبسّط للمبتدئين

كرسم الصورة على مخطط صغير ثم تكبيرها بعد الاكتمال.

شرح أكاديمي متخصص

قدّمه Rombach وآخرون (2022).

أمثلة عملية

  • Stable Diffusion.

التطبيقات والاستخدامات

  • توليد الصور من نص.

المزايا

  • كلفة أقل وجودة عالية.

القيود والعيوب

  • يعتمد على جودة المشفِّر.

تعلّم وراجع

مصطلحات مقترحة للتعلّم بعده