[edit] Modul staționar
Lanțurile Ergodic Markov sunt descrise printr-un grafic puternic conectat. Aceasta înseamnă că într-un astfel de sistem este posibil să treci de la orice stat la orice stat într-un număr finit de pași.
Pentru lanțurile ergodice, pentru un timp suficient de lung de funcționare (), se instalează un regim staționar. la care probabilitățile stărilor sistemului nu depind de timp și nu depind de distribuția probabilității în momentul inițial al timpului, adică .
[modificare] Clasificarea lanțurilor ergodice
În lanțul ergodic, se pot distinge clasele ciclice. Numărul de clase ciclice se numește perioada de lanț. dacă lanțul constă în întregime dintr-o clasă ciclică, se numește regulat. Pe măsură ce timpul trece la starea actuală a claselor ciclice într-o anumită ordine, și fiecare d pași este în aceeași clasă ciclică.
Astfel, lanțurile ergodice sunt împărțite în mod regulat și ciclic.