Sn, n=1…N, P{n(t)=i}=Pi(t) – вероятность того что состояние будет с номером i. Колмогоров доказал, что процесс Pi(t) детерминирован и определяется уравнениями Колмогорова. Пусть процесс находиться в состоянии Si – процесс может выйти и войти в него.
Уравнения Колмогорова (для неоднородного). -однородный процесс l не зависит от t.
Через продолжительное время процесс успокаивается и вероятности станут константами. Марковский процесс при t®¥ вырождается в стационарный Марковский процесс.
Через длительное t: - вырожденное уравнение К.
Достаточное условие вырождение МП в стационарный:
· число состояний системы конечно
· из любого состояния за конечное число шагов можно попасть в любое другое