馬氏鏈定理

如果滿足非週期，任意兩個狀態之間可達則此馬氏鏈收斂於一個平穩分佈。

非週期：只有當n=d，2d，3d，…時，有p(n)ij>0 ，則狀態i爲週期性的狀態，週期爲d。當馬爾可夫鏈中任意一個狀態都爲週期性的狀態時，則稱馬爾可夫鏈是週期的。

可達的：可從有向圖的角度理解。

細緻平穩條件