Elementos de una cadena de Markov
- En el tiempo 0, tengo $4. En los tiempos 1, 2, … participo en un juego en el que apuesto $2. Con probabilidad 4/5, gano el juego, y con probabilidad 1/5, pierdo el juego. Mi objetivo es incrementar mi capital a $6, y cuando lo logre se termina el juego. El juego también se termina si mi capital se reduce a $0. Defina:
- Defina Xt, S y T
- Elabore un grafo
- Establezca la matriz estocástica
- Establezca la distribución inicial
- ¿Cuál es la probabilidad de que al cuarto día tenga 4 pesos?
Determine la probabilidad de la trayectoria muestral 4-4-2-4-6-4
