Прошу помощи с решением.
Пусть

,

,

- цепь Маркова с начальным распределением

и матрицей переходных вероятностей
P. Найти а) несущественные состояния; б) математическое ожидание времени до выхода из множества несущественных состояний.
Это все, что дано.