Cadena de Mrkov

En la teora de la probabilidad, se conoce como cadena de Mrkov o modelo de

Mrkov a un tipo especial de proceso estocstico discreto en el que la probabilidad de
que ocurra un evento depende solamente del evento inmediatamente anterior. Esta
caracterstica de falta de memoria recibe el nombre de propiedad de Markov.

Definicin formal

En matemtica se define como un proceso estocstico discreto que cumple con la

propiedad de Mrkov, es decir, si se conoce la historia del sistema hasta su instante
actual, su estado presente resume toda la informacin relevante para describir en
probabilidad su estado futuro.

Una cadena de Mrkov es una secuencia X1, X2, X3,... de variables aleatorias.

El anlisis de Markov es una forma de analizar el movimiento actual de alguna variable, a fin de
pronosticar el movimiento futuro de la misma.

Este mtodo ha comenzado a usarse en los ltimos aos como instrumento de investigaciones
de mercadotecnia

Posee 3 propiedades bsicas:

1. La suma de las probabilidades de los estados debe ser igual a 1.

2. La matriz de transicin debe ser cuadrada.
3. Las probabilidades de transicin deben estar entre 0 y 1.

Conclusin

Para concluir podemos decir que las cadenas de Markov son una herramienta para
analizar el comportamiento y el gobierno de determinados tipos de procesos
estocsticos, esto es, procesos que evolucionan de forma no determinstica a lo largo del
tiempo en torno a un conjunto de estados.

Que para su elaboracin requieren del conocimiento de diversos elementos como son el
estado y la matriz de transicin.
 Anlisis CADENAS DE MARKOV

Una cadena de markov consta de unos estados E1 E2 E3 E4..En. que inicialmente en

un tiempo 0 o paso 0 se le llama estado inicial, adems de esto consta de una matriz de
transicin que significa la posibilidad de que se cambie de estado en un prximo tiempo
o paso.
MATRIZ DE TRANSICIN:
Una matriz de transicin para una cadena de Markov de n estado es una matriz de n X n
con todos los registros no negativos y con la propiedad adicional de que la suma de los
registros de cada columna (o fila) es 1.
Por ejemplo: las siguientes son matrices de transicin.

REPRESENTACIN GRAFICA DE UNA MATRIZ DE TRANSICIN:

Es el arreglo numrico donde se condensa las probabilidades de un estado a otro. A
travs de una grafica de matriz de transicin se puede observar el comportamiento
estacionario representado por una cadena de Markov tal que los estados representan la
categora en que se encuentre clasificado. Como se aprecia a continuacin:

La mejor manera de entender que es una cadena de markov es desarrollando un ejemplo

sencillo de estas mismas como el siguiente.
Ej. 1.
En un pas como Colombia existen 3 operadores principales de telefona mvil como lo
son tigo, Comcel y movistar (estados).
Los porcentajes actuales que tiene cada operador en el mercado actual son para tigo 0.4
para Comcel 0.25 y para movistar 0.35. (estado inicial)
Se tiene la siguiente informacin un usuario actualmente de tigo tiene una probabilidad
de permanecer en tigo de 0.60, de pasar a Comcel 0.2 y de pasarse a movistar de 0.2; si
en la actualidad el usuario es cliente de Comcel tiene una probabilidad de mantenerse en
Comcel del 0.5 de que esta persona se cambie a tigo 0.3 y que se pase a movistar de
0.2; si el usuario es cliente en la actualidad de movistar la probabilidad que permanezca
en movistar es de 0.4 de que se cambie a tigo de 0.3 y a Comcel de 0.3.
Partiendo de esta informacin podemos elaborar la matriz de transicin.

La suma de las probabilidades de cada estado en este caso operador deben ser iguales a
1

Po= (0.4 0.25 0.35) estado inicial

Tambin se puede mostrar la transicin por un mtodo grafico

Ahora procedemos a encontrar los estados en los siguientes pasos o tiempos, esto se
realiza multiplicando la matriz de transicin por el estado inicial y asi sucesivamente
pero multiplicando por el estado inmediatamente anterior.

Como podemos ver la variacin en el periodo 4 al 5 es muy mnima casi insignificante

podemos decir que ya se a llegado al vector o estado estable.