马氏链案例

0 0.368 0.368
0.632 0.264 0.448
p 3 3 P ( S n 1 3 S n 3 ) P (D n 0 ) P (D n 3 ) 0 .448
模型建立 状态概率 a i(n ) P (S n i)i, 1 ,2 ,3 马氏链的基本方程 a(n1)a(n)P
0.368 0 0.632 P 0.368 0.368 0.264
状态转 移规律
Sn1 3S,n Dn,
Dn Sn Dn Sn
Pn 0 ) 0 .368
p11 p21 p31
p12 p22 p32
p13
p23
p33
p p …1 12 3 …P P ((S S n n 1 1 2 3S Sn n 1 1) ) 0 P (D n 1 ) 0 .632 000...133866488
在稳态情况下计算失去销售机会的概率和每周的 平均销售量, 作为该存贮策略的评价指标.
模型建立 Dn~第n周需求量，均值为1的泊松分布
P ( D n k ) e 1 /k !( k 0 ,1 ,2 ,L )
Dn 0
1
2
3
>3
P 0.368 0.368 0.184 0.061 0.019
Sn~第n周初库存量(状态变量 ) Sn{1,2,3} 状态转移阵
均售量
i 1j 1
需求不超过存量,需求被售 需求超过存量,存量被售
3i
[ jP (D n jS n i) i( P D n iS n i)]P (S n i) i 1j 1
0.6320.2850.8960.263 n充分大时
0.9770.4520.857
P(Sn i)wi
从长期看，每周的平均销售量为 0.857(架)

所以{Xn,n≥0}是马尔可夫链，且
pij P( X n 1 j X n i ) P( f i, Yn 1 j ) P( f i, Y1 j )
二、切普曼-柯尔莫哥洛夫方程
1，随机矩阵 定义：称矩阵A=(aij)S×S为随机矩阵，若aij ≥0，且
i S , 有 aij 1
例5 Polya（波利亚）模型
罐中有b只黑球及r只红球，每次随机地取出一只后 把原球放回，并加入与抽出球同色的球c只，再第二次 随机地取球重复上面步骤进行下去，{Xn=i}表示第n回 摸球放回操作完成后，罐中有i只黑球这一事件，所以
i b r nc , i P X n 1 j X n i 1 , b r nc 0,
x
j i 1
( j i 1)!
dG x ,
j i 1, i 1 其它
Pij 0,
例3 G / M /1排队系统 来到时间间隔分布为G，服务时间分布为指数分布，参 数为 ，且与顾客到达过程独立。 Xn-----第n个顾客来到时见到系统中的顾客数（包括 该顾客），则{Xn，n≥1}是马尔可夫链。记
jS
显然马尔可夫链{Xn,n≥0}的一步转移概率矩阵P为 随机矩阵。 2，n步转移概率 定义：设{Xn,n≥0}是一马尔可夫链，称
n pij P X n m j X m i ,
n 0, i, j 0
为马尔可夫链{Xn,n≥0}的n步转移概率。记
i (n) P X n i ,
j ic j i else
这是一个非齐次的马尔可夫链，在传染病研究中有用。
下面的定理提供了一个非常有用的获得马尔可夫链的方 法，并可用于检验一随机过程是否为马尔可夫链。

随机过程论文——马氏链的应用学院：东凌经济管理学院班级：金融0902班姓名:一、文献综述马氏链在日常生活诸多领域中有着广泛的应用0我引用了五篇文献，分别是刘家军的马氏链在无赔款优待模型中的应用；廖捷、陈功的叠加马尔科夫链模型在高原年降水量预测中的应用；郭小溪的借助于马尔柯夫链的无后效性性质，预测2000~ 2005年6年的8项支出量；吴加荣、谢明铎、何穗的一类马氏链的数据仿真与应用；肖定文、黄崇起的用马尔柯夫过程预测股市短期或中长期走势。

刘家军在2009年介绍了马氏链在无赔款优待模型中的应用，利用mat lab7. 0计算在未来几年中索赔事件发生的强度分布与被保险人所处折扣等级的分布以及两者的极限分布，并依此计算纯保费。

降水量的预测是气象学中一项重要的研究工作。

由于气象系统的复杂性、多样性，使得降水过程具有不确定性、较难精确预测的特点。

廖捷、陈功2010年引入了叠加马尔科夫链模型，以位于川西高原的小金站1961-2010年的全年降水量资料为例，探讨了叠加马尔科夫链模型在高原年降水量预测中的应用。

廖捷、陈功利用均值-均方差分级法对年降水量进行分级，并由此将小金站各年的全年降水量划分为5 个状态。

根据各年降水量的状态，可统计得到不同步长的概率转移矩阵。

在进行降水量的叠加预测时，主要考虑利用步长为1~4的概率转移矩阵进行计算。

首先利用1961〜2000长度为40年的降水量序列预测了2001年的降水量，之后去掉1961年降水量值，加入2001年实际观测降水量值，保持序列长度不变，预测2002年的降水量。

以此类推，利用叠加马尔科夫链模型预测了小金站200N2010共十年的降水量，并与该站实际观测降水量进行了对比。

2006年郭小溪利用长春市居民1998、1999连续两年的收、支数量变化，借助于马尔柯夫链的无后效性性质，建立居民消费性支出结构的概率转移矩阵，进而预测出自2000年至2005年6年的8项支出值；进一步分析居民消费性支出变化的基本规律和受控因素，并与经济发展条件一起探讨发展经济的人文环境影响作用。

显然，cij 0
n
n
cij (ai1b1 j ai2b2 j ainbnj ), (i 1,2,, n)
j 1
j 1
n
n
cij (ai1b1 j ai2b2 j ainbnj ), (i 1,2,, n)
j 1
j 1
n
用随机变量 X n 表示第 n 个月的经营状况
Xn 1 Xn 2
表示销路好； 表示销路坏；
n 0,1,2
X n 称为这个经营系统的状态。
用ai n表示第 n 月处于状态 i 的概率， i 1,2,
即
ai n PXn i ai n 称为状态概率。
pij 表示已知这月处于状态 i ，下月处于状态 j 的概率，i, j 1,2, 即
每次传播消息的失真率为 p, 0 p 1,
即 ai 将消息传给 ai1, 时，传错的概率为 p
这样经过长时间传播第n个人得知消息时，消息 的真实程度如何？
第n个人知道消息可能是真，也可能是假， 有两种状态，记为
Xn 1 Xn 2
表示消息假； 表示消息真；
n 0,1,2
用ai n表示第 n 个人处于状态 i 的概率， i 1,2,
n01 2 3
4
ห้องสมุดไป่ตู้
1 0.5 0.45 0.445 0.4445 ？
0 0.5 0.55 0.555 0.5555 ？
a1(n)

5 10

5 102

a2 (n)

4 9

5 10n

5 10
1 (

1 10n1