论文部分内容阅读
1 马尔柯夫过程 马尔柯夫过程是从一类经验过程抽象而得到的一种随机过程。这类过程相应于一些系统,它们的状态按某一概率规率以一定的方式随时间t而变化,其方式为:系统从时刻t_o的给定状态E_i到时刻t_o+1时达于状态E_j的概率只依赖于时刻t_o时的状态E_i而与时刻t_o以前系统的状态无关。在自然界和社会中有一类事物它们的变化只与它们近期的状态有关。对于这类过程,俄国数学家马尔柯夫在本世纪初首先作了数学上的描述和分析。由此,人们把具有