北京交通大学硕士研究生课程《随机过程》4.1-1
- 格式:ppt
- 大小:574.50 KB
- 文档页数:27
第四章 Markov 过程本章我们先讨论一类特殊的参数离散状态空间离散的随机过程,参数为0{0,1,2,}T N ==L ,状态空间为可列{1,2,}I =L 或有限{1,2,,}I n =L 的情况,即讨论的过程为Markov 链。
Markov 链最初由Markov 于1906年引入,至今它在自然科学、工程技术、生命科学及管理科学等诸多领域中都有广泛的应用。
之后我们将讨论另一类参数连续状态空间离散的随机过程,即纯不连续Markov 过程。
§4.1 Markov 链的定义与性质一、Markov 链的定义定义 4.1设随机序列{;0}n X n ≥的状态空间为I ,如果对0n N ∀∈,及0110011,,,,,{,,,}0n n n n i i i i I P X i X i X i +∈===>L L ,有:11001111{,,,}{}n n n n n n n n P X i X i X i X i P X i X i ++++=======L (4.1.0)则称{;0}n X n ≥为Markov 链。
注1:等式(4.1.0)刻画了Markov 链的特性,称此特性为Markov 性或无后效性,简称为马氏性。
Markov 链也称为马氏链。
定义4.2 设{;0}n X n ≥为马氏链,状态空间为I ,对于,i j I ∀∈,称1{}()ˆn n i j P X j X i p n +===为马氏链{;0}n X n ≥在n 时刻的一步转移概率。
注2:一步转移概率满足:()0,,()1,i j i jj Ip n i j Ipn i I ∈≥∈=∈∑若对于,i j I ∀∈,有1{}()ˆn n i j i j P X j X i p n p +===≡即上面式子的右边与时刻n 无关,则称此马氏链为齐次(或时齐的)马氏链。
设{}0()(0),p i P X i i I ==∈,如果对一切i I ∈都有00()0,()1i Ip i p i ∈≥=∑,称0()p i 为马氏链的初始分布。
《随机过程》教学大纲课程编码:1511104303课程名称:随机过程学时/学分:48/3先修课程:《数学分析》、《概率论与数理统计》适用专业:数学与应用数学开课教研室:信息与计算科学教研室一、课程性质与任务1.课程性质:随机过程是概率论与数理统计的后继课程,是数学与应用数学专业的专业选修课。
随机过程通常被视为概率论的动态部分,即研究的是随机现象的动态特征,着重对随时间和空间变化的随机现象提出各种不同的模型并研究其内在的性质与相互联系,具有较强的理论性。
该学科在社会科学、自然科学、经济和管理等各个领域中都有广泛的应用。
随机过程论在理论与应用两方面都发展迅速,学习、了解这门学科对概率统计及数学其他分支如信息与计算科学、自然学科、工程技术乃至经济管理等方面的学者及科技工作者都是重要而且有益的。
本课程开设在第6学期。
2.课程任务:通过本课程的学习,学生应能较好地理解随机数学的基本思想,掌握几个常用过程,如泊松过程、马尔可夫链、生灭过程、更新过程、鞅的基本概念,基本理论及分析方法。
提高学生的数学素质,加强学生运用随机过程的思想方法开展科研工作和解决实际问题的能力。
二、课程教学基本要求《随机过程》要求在熟练掌握概率论的基础上深刻理解随机过程的基本思想,理解随机过程是概率论的动态部分的含义;掌握随机过程的分类方法及常见的随机过程(如Poisson 过程、更新过程、Markov链和鞅等)的各种性质、推广形式及简单应用。
本课程的成绩考核形式:末考成绩(闭卷考试)(70%)+平时成绩(平时测验、作业、课堂提问、课堂讨论等)(30%)。
成绩评定采用百分制,60分为及格。
三、课程教学内容第一章 准备知识1.教学基本要求复习随机变量、分布函数、分布律和概率密度函数的概念,条件分布,函数的分布求法,常见的离散型与连续型分布,及多维随机变量的知识;复习随机变量的数学期望、方差、矩、协方差与协方差阵、相关系数的定义及计算;掌握条件数学期望的求法,全期望公式的意义与应用;掌握随机变量的特征函数的定义、性质与求法;理解随机变量序列的各种收敛性。
硕士研究生学位课程教学大纲随机过程(课程名称)Stochastic Process(Course Title)课程编号:IE11001 课程性质:学位课程学分数: 3 课程总学时:48学时开课学院:信息电子学院授课教师:姚青预备知识:高等数学、概率论、线性代数一、课程学习目的及要求:随机过程是现代概率论的一个重要课题,它主要研究和探讨客观世界中随机演变过程的规律性,并应用于控制﹑通信﹑生物﹑物理﹑雷达通讯﹑地质﹑天文气象﹑社会科学等工程科学技术中。
通过本课程的学习,要求学生掌握随机过程的基本概念、随机过程的统计特征描述、随机信号通过系统分析以及电子系统中常见的窄带、正态随机信号通过系统的分析以及电子系统中常见的窄带、正态随机信号、马尔可夫过程、平稳过程、信号检测与估计等的基本理论方法,为学生在信号与信息处理领域打下扎实的理论基础,为学习后续课程以及将来的发展奠定坚实的基础。
二、主要章节与学时安排:第一章随机变量基础(6学时)教学内容与要求:掌握随机变量的基本概念,随机变量的分布函数与概率密度、数字特征、特征函数和统计特性等。
重点:随机变量的统计特性。
1.1 概率论的基本术语1.2 随机变量的定义1.3 随机变量的分布函数与概率密度1.4 多维随机变量及分布1.5 随机变量的数字特征1.6 随机变量的函数1.7 随机变量的特征函数1.8 多维正态随机变量1.9 复随机变量及其统计特性1.10 MATLAB的统计函数第二章随机过程的基本概念(9学时)教学内容与要求:要求理解和掌握随机过程的概念及定义;掌握和应用随机过程的统计描述;理解和掌握平稳随机过程、各态历经过程的概念和统计特性;掌握和应用随机过程的联合分布和互相关函数;掌握和应用随机过程的功率谱密度;理解和掌握脉冲型随机过程的统计特性分析等。
重点:随机过程的概念和统计特性、随机过程功率谱密度等等。
2.1 随机过程的基本概念及定义2.2 随机过程的统计描述2.3 平稳随机过程2.4 随机过程的联合分布和互相关函数2.5 随机过程的功率谱密度2.6 典型的随机过程2.7 基于MATLAB的随机过程分析方法2.8 信号处理实例第三章随机过程的线性变换(9学时)教学内容与要求:掌握和应用线性系统变换的基本概念和基本定理;理解和掌握随机信号的导数与积分;掌握和应用随机过程线性变换的微分方程法、随机过程线性变换的冲激响应法和频谱法;掌握和应用随机信号通过线性的分析方法;理解和掌握白噪声与等效通能带的概念和特性等。