2014 dxdy logo

Научный форум dxdy

Математика, Физика, Computer Science, Machine Learning, LaTeX, Механика и Техника, Химия,
Биология и Медицина, Экономика и Финансовая Математика, Гуманитарные науки




 
 Марковская цепь
Сообщение05.01.2011, 22:26 
У нас есть однородная Марковская цепь в непрерывном времени $X_t$ c состояниями $x_1,...,x_n$. Пусть
$$
p_{ij}(t) = P[X_t = x_j|X_0 = x_i].
$$
Тогда
$$
\sum\limits_{j=1}^n p_{ij}(t)  = 1
$$
и
$$
p_{ij}(t+s)  = \sum\limits_{k=1}^n p_{ik}(t)p_{kj}(s).
$$
Допустим, $p_{ij}(t) = 0$ для всех $t\in [0,T]$. Как показать, что
$p_{ij}(t) = 0$ для любых $t$?

У меня получилось так: $p_{ij}(0) = \delta_{ij}$ и
$$
\frac{d}{dt}p_{ij}(t) = \sum\limits_{k=1}^n\lambda_{ik}(p_{ik}(t) - p_{ij}(t)),
$$
где
$$
\lambda_{ik} = \lim\limits_{t\to 0}\frac{p_{ik}(t)}{t}.
$$

Дальше вроде должно быть просто, но не выходит.

 
 
 
 Re: Марковская цепь
Сообщение06.01.2011, 15:50 
Аватара пользователя
Можно так: просто доказать, что во вложенной цепи Маркова состояние $j$ не достижимо из $i$. Это совсем не трудно.

 
 
 
 Re: Марковская цепь
Сообщение06.01.2011, 16:09 
Я уже прочитал про эргодичность Марковских цепей (правда, в википедии)- там есть похожий факт: следующие утверждения эквивалентны
В. Для некоторого t > 0 матрица строго положительна (то есть Pij(t) > 0 для всех i,j).
Г. Для всех t > 0 матрица строго положительна.

Есть ли понятие эргодичности для произвольного Марковского процесса (а то что-то не могу найти)

 
 
 [ Сообщений: 3 ] 


Powered by phpBB © 2000, 2002, 2005, 2007 phpBB Group