作业帮 > 数学 > 作业

请问什么是“半马尔科夫过程”

来源:学生作业帮 编辑:搜搜考试网作业帮 分类:数学作业 时间:2024/07/16 06:11:06
请问什么是“半马尔科夫过程”
请问什么是“半马尔科夫过程”
马尔科夫过程(MarKov Process)是一个典型的随机过程.设X(t)是一随机过程,当过程在时刻t0所处的状态为已知时,时刻t(t>t0)所处的状态与过程在t0时刻之前的状态无关,这个特性成为无后效性.无后效的随机过程称为马尔科夫过程.马尔科夫过程中的时同和状态既可以是连续的,又可以是离散的.我们称时间离散、状态离散的马尔科夫过程为马尔科夫链.马尔科夫链中,各个时刻的状态的转变由一个状态转移的概率矩阵控制.