来源：原始 Jupyter Notebook。内容已转换为网页阅读格式；下载原文件。

概率图模型分类

  • 概率图模型（Probabilistic Graphical Model，PGM）
    • 贝叶斯网络（Bayesian Network，有向图模型）
      • 隐马尔可夫模型（Hidden Markov Model，HMM，生成式模型）
    • 马尔可夫网络（Markov Network，无向图模型）
      • 马尔可夫随即场（Markov Random Field，MRF，生成式模型）
      • 条件随即场（Conditional Random Field，CRF，判别式模型）

概率图模型的推断方法

  • 精确推断（动态规划问题）
    • 变量消去
    • 信念传播（Belief Propagation）
  • 近似推断
    • 采样（sampling）
      • 马尔可夫链-蒙特卡洛（Markov Chain Monte Carlo，MCMC）
        • Metropolis-Hastings（MH 算法）
        • 吉布斯采样（Gibbs sampling）
    • 变分推断（variational inference）