
로그인 후 이용해주세요
저장소에 저장되었습니다.
로그인 후 이용해주세요
데이터 패턴의 관찰 확률을 에너지 함수와 볼츠만 분포로 설명하는 볼츠만 머신의 기본 원리를 소개함
모델의 확률분포와 실제 데이터 분포의 차이를 KL divergence로 정의하고 이를 최소화하도록 매개변수를 학습하는 원리를 설명함
완전 연결 구조의 볼츠만 머신은 연산량이 매우 커지는 문제가 있어 실제 활용이 어렵다는 한계를 지님
이를 해결하기 위해 가시 노드와 숨은 노드만 연결되는 Restricted Boltzmann Machine(RBM) 구조를 도입함
RBM 학습에서는 Contrastive Divergence(CD) 알고리즘과 MCMC 샘플링을 이용해 모델 파라미터를 효율적으로 추정함