2014 dxdy logo

Научный форум dxdy

Математика, Физика, Computer Science, Machine Learning, LaTeX, Механика и Техника, Химия,
Биология и Медицина, Экономика и Финансовая Математика, Гуманитарные науки


Правила форума


Посмотреть правила форума



Начать новую тему Ответить на тему
 
 Будет ли последовательность марковской цепью?
Сообщение14.05.2023, 18:01 


14/05/23
1
Привет всем , вопрос по цепям Маркова
Пусть $\eta$ - марковская цепь с множеством состояний $\left \{ 1,2,3 \right \} $ и матрицей переходных вероятностей $\begin{bmatrix} 0 & 1-a & a\\ 1-b & 0 & b\\ \frac{1}{3} & \frac{1}{3} & \frac{1}{3} \end{bmatrix}$


Определим последовательность $\xi_n, n \geq 0$ так: $\xi_n=\left\{\begin{matrix} 1   , \eta_n = 1,\eta_n =2 \\2                     , \eta_n = 3 \end{matrix}\right. $
При каком условии $\xi_n$ также будет марковской цепью?

Вот что я хотел сделать:
1) Сформулировать марковское свойство для первой последовательность, а потом использовать его для упрощения аналогичного для второй последовательности. НО я не знаю что делать когда, например, $\xi_n=1$ , так как в этом случае $\eta_n$ может быть равно 1 или 2, как это записать формулой ( пробовал через сумму вероятностей, тк это независимые события, но ничего конкретного не получалось)
2) Построить диаграмму переходов , но в таком случае у меня получалось, что сумма элементов строк матрицы переходов $\xi$ не равняется 1 ( параметры сокращаются ).
Как лучше подступить?

 Профиль  
                  
 
 Re: Будет ли последовательность марковской цепью?
Сообщение14.05.2023, 18:56 
Заслуженный участник
Аватара пользователя


30/01/09
7139
vilgeforc5 в сообщении #1593900 писал(а):
НО я не знаю что делать когда, например, $\xi_n=1$ , так как в этом случае $\eta_n$ может быть равно 1 или 2,

Однако, в каких-то случаях (при определённых соотношениях между $a$ и $b$ ) $\xi_{n+1}$ от этого не зависит. И эта последовательность будет марковской. А в каких-то случаях будет зависеть.

 Профиль  
                  
 
 Re: Будет ли последовательность марковской цепью?
Сообщение14.05.2023, 19:18 


14/11/21
141
Напр. при $a=b$

Исходя из $\exists p_{11},p_{22}$, не зависящих от $p_1,p_2,p_3$:

$\begin{bmatrix}(1-a)p_1+(1-b)p_2+\frac{2}{3}p_3\\ a p_1+b p_2+\frac{1}{3}p_3 \end{bmatrix}=\begin{bmatrix}p_{11}&1-p_{11}\\ 1-p_{22}&p_{22}\\ \end{bmatrix}^T \begin{bmatrix}p_1+p_2\\ p_3 \end{bmatrix}$

Причем, получается, что:
$p_{11}=1-a,p_{22}=\frac{1}{3}$

 Профиль  
                  
Показать сообщения за:  Поле сортировки  
Начать новую тему Ответить на тему  [ Сообщений: 3 ] 

Модераторы: Модераторы Математики, Супермодераторы



Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей


Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете добавлять вложения

Найти:
Powered by phpBB © 2000, 2002, 2005, 2007 phpBB Group