He estado buscando un poco y no encuentro si este tipo de operaciones están permitidas ya que es como explotar la propiedad Markov.
Consideremos una cadena de Markov perteneciente a un espacio de estados $S = \{1,2,3\}$ con el objetivo de encontrar (donde $a,b,c \in S$ ): $$\mathbb{P}(X_1=a, X_2=b, X_3=c | X_0 = a)$$
Dado que no estoy muy seguro de cómo resolver la probabilidad conjunta a la izquierda de la probabilidad condicional lo reescribí utilizando la propiedad: $$\mathbb{P}(A|B) = \frac{\mathbb{P}(A,B)}{\mathbb{P}(B)}$$
Lo que resulta en: $$ \frac{ \mathbb{P}(X_1=a, X_2=b, X_3=c, X_0 = a) }{ \mathbb{P}(X_0 = a)} \quad \quad ,\left(\mathbb{P}(X_0=a) \neq 0\right) $$
A continuación, aplicando la regla de la cadena al numerador (y anulando así el término del denominador): $$ \mathbb{P}(X_1=a | X_2=b, X_3=c, X_0=a) \cdot \mathbb{P}(X_2=b | X_3=c, X_0=a) \cdot \mathbb{P}(X_3=c | X_0=a) $$
Entonces, por la propiedad de Markov, esto se convierte en: $$ \mathbb{P}(X_1=a | X_0=a) \cdot \mathbb{P}(X_2=b | X_0=a) \cdot \mathbb{P}(X_3=c | X_0=a) $$
Que luego puedo resolver.
Sin embargo, tenga en cuenta que: $$ \mathbb{P}(X,Y) = \mathbb{P}(Y,X) $$
Así que retrocediendo un par de pasos antes de aplicar la regla de la cadena podríamos reescribir la fracción como:
$$ \frac{ \mathbb{P}(X_3=c, X_2=b, X_1=a, X_0 = a) }{ \mathbb{P}(X_0 = a)} \quad \quad ,\left(\mathbb{P}(X_0=a) \neq 0\right) $$
A continuación, aplicando la regla de la cadena como se ha hecho anteriormente: $$ \mathbb{P}(X_3=c | X_2=b, X_1=a, X_0=a) \cdot \mathbb{P}(X_2=b | X_1=a, X_0=a) \cdot \mathbb{P}(X_1=a | X_0=a) $$
Del mismo modo, por la propiedad de Markov esto se convierte en: $$ \mathbb{P}(X_3=c | X_2=b) \cdot \mathbb{P}(X_2=b | X_1=a) \cdot \mathbb{P}(X_1=a | X_0=a) $$
Como antes, ahora puedo resolver esto (y mucho más fácil que la ecuación final de la primera sección).
Que es donde tengo muchas dudas sobre si ese tipo de operación está permitida, que yo sepa... ¿o son equivalentes?
Muchas gracias de antemano.