Dirichlet Distribution& Process Notes(笔记)

1. Dirichlet 概率分布 是 概率分布的分布。its support 是simplex，即Dirichlet 概率密度函数的定义域是simplex上的一个点。Dirichlet Distribution 描述了simplex上每个点的概率，如下图所示

                    Figure 1 Dirichlet Distribution (From wiki)

2. Dirichlet 分布的参数alpha_i表示pesudo counts，即category distribution中选中第i个component的次数。由于

E(theta_i)=alpha_i/sigma{alpha_i}; 所以alpha_i数值大的话，表示选中的theta_i的期望概率要高。