马尔科夫链详解(xiánɡjiě)1马尔可夫链的定义(dìngyì)///上表中的4个概率就称为状态的转移概率，而这四个转移概率组成的矩阵B＝称为转移概率矩阵。可以(kěyǐ)看出，转移概率矩阵的一个特点是其各行元素之和为１2转移概率(gàilǜ)矩阵及柯尔莫哥洛夫定理//（1）转移概率矩阵中的元素是根据近期市场或顾客的保留与得失(déshī)流向资料确定的。（2）下一期的概率只与上一期的预测结果有关，不取决于更早期的概率。（3）利用转移概率矩阵进行决策，其最后结果取决于转移矩阵的组成，不取决于原始条件，即最初占有率。转移概率(gàilǜ)矩阵决策的应用步骤例1某计算机机房的一台计算机经常出故障，研究者每隔15min观察一次计算机的运行状态，收集(shōují)了24h的数据（共作97次观察）。用1表示正常状态，用0表示不正常状态，所得的数据序列如下：1110010011111110011110111111001111111110001101101111011011010111101110111101111110011011111100111////Matlab程序(chéngxù)见ex2.m黑妹/////3）求出转移(zhuǎnyí)概率矩阵的平衡状态，即稳定状态。3转移概率的渐近性质(xìngzhì)—极限概率分布/////Matlab程序(chéngxù)见ex3.m练习(liànxí)内容(nèiróng)总结