VAE(Variational Autoencoder) (2)

  reparameterization trick

 VAE는 입력을 재현하도록 학습한다. 확률 분포에 따라 샘플링한 데이터가 중간에 있스으므로 편미분, 역전파 둘다 불가능하다. 따라서 VAE는 reparameterization trick이라는 방법을 사용한다.

 

 

 

 

 

reparameterization trick은

평균 = 0
표준편차 = 1 
정규화분포를 따른다.

z = μ + ϵσ
ϵ에 표준편차(σ)를 곱한 후 평균 μ를 더해 계산한다.

 

 

VAE 재구성 오차

 

 

binarycrossentropy 교차 엔트로피

두 값의 교차 엔트로피와 오차 제곱을 비교하는 그래프