会计学234567例：仓储系统维修点有一仓库，存储(cúnchǔ)某配件以备维修时使用，该配件每周的消耗量为独立同分布的随机变量，其概率分布为：910111213141516/例题：无限制随机游动设质点(zhìdiǎn)在数轴上移动，每次移动一格，向右移动的概率为p，向左移动的概率为q=1-p，这种运动称为无限制随机游动。以Xn表示时刻n质点(zhìdiǎn)所处的位置，则{Xn,n∈T}是一个齐次马尔可夫链，求一步和k步转移概率。1920212223242526272829303132333435任一马尔可夫链的状态空间I，可唯一的分解成有限个或可列个互不相交(xiāngjiāo)的子集D,C1,C2,…之和，使得每一Cn是常返态组成的不可约闭集；如果只关心非常返状态与各闭集之间的关系，忽略闭集内部的转移，则可把各闭集内部的状态合并成一个状态—吸收态（pii=1），P矩阵(jǔzhèn)可进一步改写为：例如：马尔科夫链的状态空间为I={1,2,…,10}，其转移概率(gàilǜ)矩阵为：吸收(xīshōu)马尔科夫链性质40