若某人投保时健康, 问10年后他仍处于健康状态的概率。
第3页/共23页
5.5 随机状态转移模型
状态与状态转移 ➢随机变量Xn:第n年的状态 状态概率 ai (n)
Xn
1, 2,
第n年健康 第n年疾病
ai (n) P(Xn i), i 1, 2, n 0,1,
➢今年处于状态i, 来年处于状态j的概率 pi:j 转移概率
存贮策略是周末库存量为零时订购3架 周末的库存量可 能是0, 1, 2, 3,周初的库存量可能是1, 2, 3。 用马氏链描述不同需求导致的周初库存状态的变化。 动态过程中每周销售量不同,失去销售机会(需求超过 库存)的概率不同。
可按稳态情况(时间充分长以后)计算失去销售机会的 概率和每周的平均销售量。
马氏链的两个重要类型
设状态i是非吸收状态,j是吸收状态,则首达概率f ij (n) 实际上是i经n次转移被j吸收的概率。而
fij = fij (1) + fij(2) + … + fij(n) + …
则是从非吸收状态i出发终将被吸收状态j吸收的概率。 记 F={f ij} 则 F=MR
例如,可以算出前面第二种情况中
第19页/共23页
5. 6 马尔可夫链的应用模型
模型求解 ➢ 估计这种策略下每周的平均销售量
第n周平均售量Rn
需求不超过存 量,销售需求
需求超过存量, 销售存量
3i
Rn [ jP(Dn j, Sn i) iP(Dn i, Sn i)] i1 j 1 3i [ jP(Dn j Sn i) iP(Dn i Sn i)]P(Sn i) i1 j 1
p23 p33
P(Dn k) e1 / k ! (k 0,1, 2 )