Что система будет находиться в 0-ом состоянии
Давайте точнее, а то система какая-то... Вы вроде искали стационарные вероятности для марковского процесса

? И математическое ожидание искать нужно у найденного стационарного распределения процесса

. Вот теперь и рассмотрите свой ответ: что за стационарное распределение нашлось - какие
значения, с какими
вероятностями. Найдите математическое ожидание.