그림으로 설명한 Stable Diffusion
(jalammar.github.io)Stable Diffusion 의 컴포넌트들
- Text Understander(Encoder) - CLIPText
- Image Generator
- Image information creator - Unet + Scheduler
- Image Decoder - Autoencoder Decoder
Diffusion 이란 ?
- Diffusion 은 어떻게 동작하는가
- 노이즈 감소를 통해 이미지 페인팅 하기
- 속도 높이기: 픽셀 이미지 대신 압축된 버전에 대해서 Diffusion 수행
- 텍스트 인코더 : Transformer Language Model
- 텍스트 정보를 이미지 생성 프로세스로 보내기