マルコフ過程

定常マルコフ連鎖のパラメータ推定

• n -> ∞で以下の状態になる

\(\pi = \pi Q\) Qが判別していればπを求めることができる

有限マルコフ連鎖のパラメータ推定

1. ある推移確率がわかっているときその積を計算する
2. logを取り尤度にする
3. 尤度を微分し、0としたとき、パラメータを推定できる