第九章 馬爾科夫分析

　　9.1馬爾科夫分析的數學原理

　　對于由一種情況轉換至另外一種情況的過程，若該過程具有轉換概率，而且此種轉換概率又可以依據其緊接的前項情況推算出來，則這種過程成為馬爾科夫過程。

　　一連串的此種轉換過程的整體成為馬爾科夫鎖鏈。

　　定義1 ：任意一個向量，如果它內部的各個元素為非負數，且總和等于1，則此向量成為概率向量。

　　定義2：一矩陣中，各行都是概率向量，則此矩陣稱為概率矩陣。

　　定理1：如果A,B都是概率矩陣，則AB乘積亦為概率矩陣，同理A的N次方也為概率矩陣。