2014-02-14から1日間の記事一覧

論文紹介「A Hierarchical Bayesian Language Model based on Pitman-Yor Processes」

NPYLMを実装するために元になっているHPYLMの論文を読む話。3章。Pitman-Yor過程はbase distributionG0とdiscount parameter 0 -d から新しい分布を作る確率過程。スティック・ブレイキングで構成できる。独立な確率変数列Vk ~ Beta(1 - d, θ+kd)とφk ~ G0か…