Марковская зависимость

Легко распространить изложенное выше на случай элементарного исхода с n целочисленными координатами.

Особенно просто записывается вероятность элементарного исхода когда имеет место марковская зависимость координат, т.е. когда распределение следующей координаты зависит только от значения предыдущей координаты

В этом случае последовательные переходы от координаты к координате и т.д. называются шагами,а вероятности

называются переходными вероятностями (за один шаг).

Если каждая координата вектора принимает значения в одном и том же конечном множестве (множестве состояний) и переходные вероятности не зависят от n, топоследовательность называется конечной цепью Маркова. В этом случае вероятность элементарного исхода можно записать так

где

- количество переходов из состояния i в состояние j

Подробно марковские зависимости исследуются в теории случайных процессов.


Понравилась статья? Добавь ее в закладку (CTRL+D) и не забудь поделиться с друзьями:  



double arrow
Сейчас читают про: