Дана матрица переходных вероятностей марковской цепи с дискретным временем

Для описания цепи Маркова удобно использовать граф вероятностей переходов, вершины которого обозначают возможные состояния системы, стрелки от одной вершины к другой указывают возможные переходы между состояниями, а число над стрелкой задаёт вероятность такого перехода.
В задаче множество состояний X=1, 2, 3, матрица вероятностей переходов имеет вид P=13131312141423013 . Тогда граф вероятностей переходов выглядит следующим образом:
Найдем матрицу P2 перехода из состояния i в состояние j за два шага по формуле:
P2=P2=13131312141423013∙13131312141423013=12736113611241148516492913
Пусть Q0=1, 0, 0