第四章 节 3-4状态空间的分解.pptx

第四章 马尔可夫链;第四章 马尔可夫链;4.3 状态空间的分解;;闭集的例;例：任意马氏链的状态空间 I 中常返态全体 C 组成一个闭集。 如果i 常返且 则状态j 也是常返的。;状态空间的分解;状态空间的分解;状态空间的分解;状态空间的分解;状态空间的分解 —— 应用例;状态空间的分解 —— 应用例;状态空间的分解 —— 应用例;基本常返闭集的性质;基本常返闭集的性质;;对基本常返闭集的进一步分解;对基本常返闭集的进一步分解;对基本常返闭集的进一步分解;对基本常返闭集的进一步分解;对基本常返闭集的进一步分解;对基本常返闭集的进一步分解;状态转移图;不可约马氏链的子链; 例 4.15 设 为例 4.14 中的马氏链,已知 , 则 的转移矩阵为;2018/5/2;第四章 马尔可夫链;Pij(n)的渐进性质与平稳分布;非常返和零常返情形;非常返和零常返情形;非常返和零常返情形;非常返和零常返情形;非常返和零常返情形;例——零常返;正常返情形;正常返情形;正常返情形;正常返情形;正常返情形;正常返情形;正常返情形;正常返情形;正常返情形;正常返情形;正常返情形;正常返情形;二、平稳分布;二、平稳分布;二、平稳分布;二、平稳分布;二、平稳分布;二、平稳分布;二、平稳分布;二、平稳分布;二、平稳分布;二、平稳分布;二、平稳分布;二、平稳分布;二、平稳分布;二、平稳分布;二、平稳分布;二、平稳分布;二、平稳分布;二、平稳分布;二、平稳分布;关于平稳分布存在性的结论;补充思考题：;有限状态马氏链的总结：;正常返情形;正常返情形