# 马尔可夫链

# 随机过程

一个随机过程 (stochastic processes) $X = \{X(t), t \in T\}$ 是一系列随机变量组成的序列。如果集合 $T$ 是可数集，那么称随机过程 $X$ 是离散时间随机过程 (discrete-time stochastic processes); 相应地，如果 $T$ 是一个连续统，那么称随机过程 $X$ 是连续时间随机过程 (continuous-time stochastic processes).

# 定义

# 离散马尔可夫链的性质

下面介绍离散马尔可夫链的性质。这些性质都可以自然推广到连续的马尔可夫链。

#

# Ref

• 统计学习方法 李航