Sea una cadena de Markov homogénea con tiempo discreto y un número contable de estados. Denotar
probabilidades de transición por pasos. Si existe una distribución discreta tal que y
,entonces se llama distribución ergódica , y la cadena misma se llama ergódica .
Sea una cadena de Markov con un espacio de estado discreto y una matriz de probabilidades de transición . Entonces esta cadena es ergódica si y sólo si
La distribución ergódica es entonces la única solución al sistema:
.cadenas de Markov | Clasificación de estados y|
---|---|
Estado | |
Cadena |