内容:马尔可夫过程的基本概念以及性质、马尔可夫过程的转移概率、马尔可夫过程的状态分类和状态转移图、马尔可夫过程遍历性的判断和极限分布的求法。
1.基本要求
1) 理解马尔可夫过程的基本概念及其性质;
2) 熟练掌握确定马尔可夫链的一步、n步转移概率和转移概率矩阵的方法;
3) 熟练掌握马尔可夫链的状态分类和状态转移图;
4) 能够根据马尔可夫链的转移概率矩阵,判断其遍历性和求出极限分布。
5) 能够根据马尔可夫过程的定义及性质,对实际问题进行建模。
2.重点、难点
重点:马尔可夫链的定义、转移概率矩阵、C-K方程
难点:确定马尔可夫链的状态分类、判断其遍历性和求出极限分布。
教学方式:专题报告、分组学习、翻转课堂。
作业:1.26、1.28
参考图书: