Cadenas Absorbentes
Cadenas Absorbentes
Cadenas Absorbentes
Absorbentes
1 0 0 0 0
p12 p23 p33
1− p 0 p 0 0
P= 0 1 −p 0 p 0
1 2 3
0 0 1− p 0 p
p32 0
p21 0 0 0 1
Concepto de cadena
absorbente
Una cadena de Markov es Absorbente cuando algunos de
sus estados son absorbentes y el resto son transitorios.
Si Q es finita y absorbente, los elementos que la componen
pueden ser reordenados así:
0 I O= Matriz nula
I= Matriz Identidad de mxm
Resultados sobre cadenas
absorbentes
Proposición: El número medio de etapas
que se estará en el estado transitorio j∈S
antes de la absorción, suponiendo que
empezamos en el estado transitorio i∈S,
viene dado por el elemento (i,j) de
(I–Q’)–1
Resultados sobre cadenas
absorbentes
Proposición: La probabilidad de ser
absorbido por un estado absorbente j∈S,
suponiendo que empezamos en el estado
transitorio i∈S, viene dada por el elemento
(i,j) de la matriz
(I–Q’)–1 R
0 0,5 0 0
0 0,5 0 0 0 0,5 0,5 0 0,5 0
Q' =
0,5 0 0,5 0 0 0 0 0,5 0 0,5
0 0,5 0 0,5 0 0 0 0,5 0
0
Q=
0 0 0,5 0 0,5 0
0 0 0 0 1 0 0 0,5
0 0 0 0 0 1 0 0
R=
0 0
0,5 0
Ejemplo 4
Realizamos los cálculos necesarios:
−1
1 − 0,5 0 0 1,6 1,2 0,8 0,4
− 0,5 1 − 0,5 0 1,2 2,4 1,6 0,8
( I − Q') −1 = =
0 − 0,5 1 − 0,5 0,8 1,6 2,4 1,2
0 0 − 0 ,5 1 0,4 0,8 1,2 1,6
0,2 0,8
0,4 0,6
( I − Q') −1 R =
0,6 0,4
0,8 0,2
Ejemplo 4
Probabilidad de que A termine
arruinándose.
La ruina de A está representada por el estado
0, que es el 2º estado absorbente, con una
probabilidad de 0,4 de que A empiece con $3 y
termine en la ruina.
Probabilidad de que B termine
arruinándose
Como es el suceso contrario del apartado a),
su probabilidad será 1–0,4=0,6.
Ejemplo 4
Número medio de tiradas que tarda en acabar
el juego
Sumamos los números medios de etapas que se
estará en cualquier estado transitorio antes de la
absorción, suponiendo que empezamos en el 3er
estado transitorio. Dichos números medios son los
que forman la 3ª fila de la matriz (I–Q’)–1. El
promedio es: 0,8+1,6+2,4+1,2=6 tiradas.
Nota: si observamos la 1ª columna de (I–Q’)–1R,
vemos que los valores van creciendo. Esto se
debe a que, cuanto más dinero tenga al principio
A, más probabilidad tiene de ganar el juego.
Ejemplo 5
Freezco Inc. Vende refrigeradores. La compañía emitió una
garantía para los refrigeradores en la que se establece la
sustitución sin cargos de cualquier refrigerador que se
descomponga antes de tres años de uso. Se tiene la
siguiente información.