Чтобы получить распределение в следующий момент времени, надо умножить вектор-строку распределения для текущего момента времени на переходную матрицу P. Тогда получим (вычислительные подробности я пропускаю)
![](https://otvet.imgsmail.ru/download/63143611_4081e32220659b0a76d75f0760f152a4_800.png)
Чтобы найти стационар, надо найти такой вектор вероятностей π, что он перейдет сам в себя, то есть π = πP. Эту систему можно расписать как систему из трех уравнений на 3 переменные (компоненты вектора π -- то есть как раз стационарные вероятности). Тогда
- плохая новость: у системы будет вырожденная матрица
- хорошая новость: мы дополнительно знаем, что сумма вероятностей равна 1
Поэтому в системе π = πP можно заменить любую строку на условие суммы вероятностей. Тогда получим систему (сразу пишу ее решение, которое легко получается любым стандартным методом
![](https://otvet.imgsmail.ru/download/63143611_a2839c761ac75223b08ed8e45a95dcef_800.png)
времени t=0 определяется вектором q. Найти:
1) распределение по состояниям в момент t=1 и t=2;
2) стационарное распределение.