随机过程PPT第四章1.ppt
文本预览下载声明
第四章马尔可夫链;§4.1马尔可夫链的概念及转移概率;;2、马氏链的转移概率 ;3、一步转移概率及矩阵;;4.多步转移概率确实定;通常我们还规定：;直观解释对照图;;用矩阵形式表示为：;5、初始概率与绝对概率;(2)绝对概率与初始概率的关系;说明n时刻的绝对概率分布完全由初始分布和n步转移概率所确定。;〔3〕马氏链的有限维分布;总结：
1〕齐次马氏链多步转移概率可由一步转移概率确定；;;;;;;例带一个吸收壁的随机游动;;;用此模型可描述赌徒输光问题;;;;;;(1)开始第一人拿球，经三次传球后又回到
第一人的概率；
(2)开始第一人拿球，经三次传球后又回到第一
人的概率；
(3)经三次传球后第一人拿球的概率；
(4)经三次传球后，又回开始拿球人的概率。;1;;;;又系统经n级传输后输出为1,问原字符
也是1的概率是多少?;;;;利用类似的方法,可得n步转移概率矩阵为
显示全部