在马尔可夫链的每一步,系统根据概率分布,可以从一个状态变到另一个状态,也可以保持当前状态。根据状态转移的不同特性,可以把马尔科夫链的状态分为常返状态和非常返状态。马尔可夫链的具有无穷多次返回特性的状态就称为常返状态。