MCMC 和Gibbs Sampling采样

这两个采样方法都是非常著名的,尤其是Gibbs Sampling在文本词的采样之中用的非常的多。我第一次遇到Gibbs Sampling是在pLSA(潜在语义分析)模型之中,而且pLSA模型还用到了一个有价值的算法应该:EM(最大期望)算法,以后希望能详细说一下这个算法。

1.随机模拟


最常用的一种,这两个方法在现代贝叶斯分析中被广泛使用。要了解这两个算法,我们首先要对马氏链的平稳分布的性质有基本的认识。

2. 马氏链及其平稳分布


3. Markov Chain Monte Carlo


4. Gibbs Sampling


最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • MCMC和Gibbs Sampling 1.随机模拟 随机模拟又名蒙特卡罗方法,蒙特卡罗方法的源头就是当年用...
    wlj1107阅读 6,340评论 3 6
  • 本文主要摘抄整理自Rickjin的《LDA数学八卦》 统计模拟中一个很重要的问题就是给定一个概率分布$p(x)$,...
    iV0id阅读 452评论 0 1
  • 原文传送门:也谈MCMC方法与Gibbs抽样 MCMC,即传说中的Markov Chain Mento Carlo...
    willheng阅读 11,091评论 2 14
  • LDA的代码实现:http://blog.csdn.net/u010551621/article/details/...
    wlj1107阅读 34,147评论 0 31
  • 在西北,一年下雨的次数屈指可数,庄稼的收成全看老天的心情。尤其到春播时节,焦急的心情更是写在脸上。 “好雨知时节,...
    丁香与海阅读 334评论 1 5