Дана матрица переходных вероятностей марковской цепи с дискретным временем

Для описания цепи Маркова удобно использовать граф вероятностей переходов, вершины которого обозначают возможные состояния системы, стрелки от одной вершины к другой указывают возможные переходы между состояниями, а число над стрелкой задаёт вероятность такого перехода.
В задаче множество состояний X=1, 2, 3, матрица вероятностей переходов имеет вид P=3401423130131313 . Тогда граф вероятностей переходов выглядит следующим образом:
Найдем матрицу P2 перехода из состояния i в состояние j за два шага по формуле:
P2=P2=3401423130131313∙3401423130131313=13112161318191671229736
Пусть Q0=1, 0, 0