数学建模|预测方法:马尔科夫预测
马尔可夫链的定义
现实世界中有很多这样的现象:某一个系统在已知现在的条件下,系统未来时刻的情况只与现在有关,而与过去的历史无关,比如,研究一个商店的累计销售额,如果现在时刻的累计销售额已知,则未来某一时刻的累计销售额与现在时刻以前的任一时刻累计销售额无关。描述这类随机现象的数学模型称为马尔可夫模型。 ### 数学表达 设
则称
事实上,证明该等式对于
成立,则它对于任意的正整数 也成立,则只要当 时等式成立,则可以称 为马尔可夫链。 设
是一个马尔可夫链,则上述等式右边的条件概率与 无关,即 则称 为时齐的马尔可夫链,称 为系统由状态 经过 个时间间隔转移到状态 的转移概率。
转移概率与转移概率矩阵
对于一个马尔可夫链

它有如下三条性质:
- 对一切
- 对于一切
- 对一切
当实际问题可以用马尔可夫链来描述时,首先要确定它的状态空间及参数集合,然后确定它的一步转移概率,关于这一概率的确定,可以由问题的内在规律得到,也可以由过去经验给出,还可以根据观测数据来估计。