上一篇开头说过1983年,美国数学家吴建福(C.F. Jeff Wu)给出了EM算法在指数族分布以外的收敛性证明。
EM算法的收敛性只要我们能够证明对数似然函数的值在迭代的过程中是增加的
即可:
证明:
一直我们的EM算法会极大化这个似然函数L,
问题得证.