Infinite Mixture of Gaussian process experts + Hybrid MCMC

Mixture model은 크게 Bayesian과 Non-Bayesian으로 나뉠 수 있다. 이때 Non-Bayesian mixture model이 일반적인 Gaussian mixture model (GMM)이고 EM 등을 이용해서 문제를 푼다. 이번 포스팅은 Bayesian Mixture Model에 대한 것이다. 즉 모든 것을 확률적으로 나타내고, Gibbs sampling이나 Variational Inference 등을 이용해서 풀게된다. 

Non-Bayesian Mixture Model

Bayesian Mixture Model

이것이 중요한 이유는 Bayesian model에 대한 이해를 높이기 좋기 때문이다. 구체적으로는 Conjugate prior를 이용하는 것이 어떤 것인지를 알 수 있다. 

동영상

발표 자료