码迷,mamicode.com
首页 > 其他好文 > 详细

LDA的Gibbs Sampling求解

时间:2018-10-06 13:16:07      阅读:168      评论:0      收藏:0      [点我收藏+]

标签:training   word   主题   sam   数学   取值   alt   重复   enc   

《LDA数学八卦》对于LDA的Gibbs Sampling求解讲得很详细,在此不在重复在轮子,直接贴上该文这部分内容。

Gibbs Sampling

 技术分享图片

技术分享图片

技术分享图片

技术分享图片

技术分享图片

批注:

1、              对于第i个词语,上式k(主题类型)未知,取值范围为[1, K],t(词语类型)已知,即观测值。

2、              由于doc-topic与topic-word独立,所以第i个词语主题为k,类型为t的概率显然是主题k概率在doc m-topic分布上的积分乘以词语t概率在topic k-word分布上的积分。即技术分享图片

 技术分享图片

 技术分享图片

批注:我们已经得到了每个topic-word的边缘分布,通过Gibbs Sampling很容易得到topic-word的完整分布。

Training And Inference

 技术分享图片

技术分享图片

技术分享图片

LDA的Gibbs Sampling求解

标签:training   word   主题   sam   数学   取值   alt   重复   enc   

原文地址:https://www.cnblogs.com/coshaho/p/9747030.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!