一、概述 Sigmoid信念网络（Sigmoid Belief Network，SBN）是一种有向图模型，这里的信念网络指的就是贝叶斯网络，也就...

一、推断的动机和困难 推断的动机 推断问题是在概率图模型中经常遇到的问题，也就是给定观测变量的情况下求解后验，这里的是隐变量（注意原来我们常用和...

一、概述 对于有向概率图模型来说，由于图中存在天然的拓扑排序关系，所以有向概率图的因式分解的形式很容易写出来。而对于无向图来说就需要根据它图中的...

一、概述 对于无向图模型，我们可以回忆一下它的基于最大团的因子分解（Hammersley–Clifford theorem）。给定概率无向图模型...

一、概述 将⼀维高斯分布推⼴到多变量中就得到了高斯网络，将多变量推⼴到无限维，就得到了高斯过程。高斯过程是定义在连续域（时间/空间）上的无限多个...

一、概述 线性回归的数据如下所示： 对于线性回归问题，假设： 其中是参数，是噪声。以二维的数据为例，其图像如下： 从几何角度出发求解线性回归问题...

一、背景 概述 如上所示，分类问题分为硬分类和软分类两种。硬分类问题指的是分类结果非此即彼的模型，包括SVM、PLA、LDA等。软分类问题将概率...

一、概述 对于下图所示的数据进行聚类，可以采用GMM或者K-Means的方法： 然而对于下图所示的数据，单纯的GMM和K-Means就无效了，可...