Page 187 - 《數學觀念總整理 3-4 》- 2019版

 狀態矩陣和轉移矩陣

 轉移矩陣代表動作，一定是 方陣 ( × )

狀態矩陣代表狀態，一定要寫成 行 矩陣 ( × 1)

 轉移矩陣 動作 一定要乘在狀態矩陣 狀態 的 前面 左邊
48

 轉移或狀態矩陣，每個元皆 ≥ 0 ，且 行的和都是 ⟹ 機率

轉移矩陣 動作 其實是一種條件機率

對於被乘的矩陣做機率重分配

ex ∶ 轉移矩陣 A × 轉移矩陣 B = 轉移矩陣

13
 馬可夫鏈的穩定狀態 ⟹ 就是無窮等比數列的收斂

⟹ X = A ∙ X …乘完以後還是自己，X 稱為馬可夫鏈的 穩定狀態

ex ∶ 設 X 為 二階 、 三階
1 −
1 − −

48 ex ∶ 打球、吃飯、… ..

395