Дана матрица переходных вероятностей Построить граф состояний

Изобразим граф состояний системы:
Используя матрицу переходных вероятностей, определим вероятности состояний Pi(1) после первого шага:
P11=P30∙P31=0,5∙0,1=0,05
P21=P20∙P22+P30∙P32=0,5∙0,1+0,5∙0,2=0,15
P31=P20∙P23+P30∙P33=0,5∙0,7+0,5∙0,4=0,55
P41=P20∙P24+P30∙P34=0,5∙0,2+0,5∙0,3=0,25
Вероятности состояний Pi(2) после второго шага:
P12=P11∙P11+P31∙P31=0,05∙0,3+0,55∙0,1=0,07
P22=P11∙P12+P21∙P22+P31∙P32=
=0,05∙0,5+0,15∙0,1+0,55∙0,2=0,15
P32=P11∙P13+P21∙P23+P31∙P33+P41∙P43=
=0,05∙0,2+0,15∙0,7+0,55∙0,4+0,25∙0,3=0,41
P42=P21∙P24+P31∙P34+P41∙P44=
=0,15∙0,2+0,55∙0,3+0,25∙0,7=0,37
Таким образом, вероятности состояний системы после 1-го и 2-го шагов соответственно равны:
P1=0,050,150,550,25;P2=0,070,150,410,37