UNIVERSIDAD DE LAS FUERZAS ARMADAS ESPEL

INGENIERA ELECTRNICA E INSTRUMENTACIN

PROCESOS ESTOCASTICOS
NOMBRE: Bermeo David
CURSO: 5TO
DOCENTE: Ing. Armando lvarez
FECHA: 10 de agosto del 2017
TEMA: CAPITULO N 7 PROCESOS DE MARKOV SCHAUM

MULTIPLICACIN DE MATRICES

7.23 Dado . Encuentre uA donde: (a)

(b) , (c) .

(a)

(b)

(c)
7.24 Dado y . Encuentre y

2 3
7.25. Dado Encuentre A y A

a) A2

b) A3

7.26. Dado

a)

b)

c)
VECTORES DE PROBABILIDAD Y MATRICES ESTOCASTICAS

7.27. Cules vectores son vectores de probabilidad?

No es vector de probabilidad ya que uno de los trminos es negativo

La suma de los trminos que contiene el vector excede el valor de 1

Si es un vector de probabilidad.

7.28. Encuentre un escalar mltiplo de cada vector v que es un vector de probabilidad:

a)

b)

c)

7.29. Cules matrices son estocsticas?

A no es una matriz estocstica, puesto que esta no es una matriz cuadrada.

B es una matriz estocstica, puesto que la suma de sus filas y columnas
independientemente no es superior a 1.

C no es una matriz estocstica, puesto que la suma de la segunda columna excede de 1.

D si es una matriz estocstica, puesto que la suma de sus filas y columnas

independientemente no es superior a 1.

MATRICES ESTOCASTICAS REGULARES Y VECTORES DE PROBABILIDAD FIJOS

7.31. Encuentre el vector de probabilidad nico fijo t de cada matriz:

(a)
7.32. Encuentre el vector de probabilidad nico fijo t de cada matriz

(a)

(b)

(a)

Primero se busca un vector fijo de P.

Luego nos queda multiplicar las matrices e igualar a los valores de la derecha.

Se fija a un valor por tanto . Por tanto, es un punto fijo

de P. Puesto que

Entonces el vector

(b)

Primero se busca un vector fijo de P.

Luego nos queda multiplicar las matrices e igualar a los valores de la derecha .
 Se fija a un valor por tanto . Por tanto, es un punto fijo
de P. Puesto que

Entonces el vector

7.33. Considere la siguiente matriz estocstica:

a) Demuestre que P es regular

b) Encuentre el vector de probabilidad nico t de P

Primero se busca cualquier vector fijo de P. Por lo tanto, fije

Por lo tanto, es un punto fijo en P. Puesto que , el

vector es:

c) Hacia cul matriz tiene ?

 Tiene componentes positivas solamente.

Todas las filas son t

d) Hacia cul vector tiende ?

Hacia t

7.34. Considere la siguiente matriz estocstica:

a) Demuestre que P es regular

3
Puesto que todas las componentes de P son positivas, P es regular
 b) Encuentre el vector de probabilidad fijo nico t de P.

Se fija w=2.

, es un punto

Fijo de P La suma de los elementos del vector u es:

, entonces el vector t es:

n
c) Hacia cul matriz tiende P ?

n
La matriz P tiende a la matriz T cada una de cuyas filas es el punto fijo t; de
n
donde P tiende a:
 a) Hacia cual vector tiende [1/4, 0, 1/2, 1/4] Pn?

La matriz Pn tiende a la matriz T cada una de cuyas filas es el punto fijo t; de donde Pn tiende a:

7.35. Considere la siguiente matriz estocstica de 3*3:

Demuestre que el siguiente vector v es un punto fijo de P:

7.36. Juan conduce el auto o toma el tren al trabajo. Si un da conduce al

trabajo, la probabilidad de que al da siguiente tome el tren ser 0.2. Por
otra parte, si toma el tren al trabajo, la probabilidad de conducir su auto al
da siguiente ser 0.3. Encuentre con qu frecuencia, en el largo plazo, l
conduce al trabajo.

Este es un proceso Markov donde los estados del sistema son C (conducir) y T (tomar el
tren)
 Por definicin se tiene que , por tanto se tiene que la matriz
, con lo cual se obtiene que l conduce con una frecuencia del

7.37. La suerte de Mara en el juego sigue un patrn. Si ella gana un juego, la

probabilidad de ganar el juego siguiente es 0.6. Sin embargo, si ella pierde un
juego, la probabilidad de perder el juego siguiente es 0.7. Hay igual posibilidad
de que ella gane el primer juego.

a) Encuentre la matriz de transicin M del proceso Markov

7.37.1. Encuentre la probabilidad de que ella gane el

segundo juego La distribucin de probabilidad del primer

juego es

Para predecir la distribucin de probabilidad del segundo juego se multiplica

Por lo tanto la probabilidad que Mara gane el segundo juego es del 45%

b) Encuentre la probabilidad de que ella gane el tercer juego

Para predecir la distribucin de probabilidad del tercer juego se multiplica

Por lo tanto la probabilidad que Mara gane el tercer juego es del 43.5%

i. Encuentre con qu frecuencia, en el largo plazo, ella gana

 La frecuencia a largo plazo con que Mara gane es de del

7.38. Suponga que q0 = [1/4, 3/4] es la distribucin de estado inicial para un

proceso de Markov con la siguiente matriz de transicin:

a) Encuentre q1, q2 y q3.

b) Encuentre el vector v al cul tiende q0Mn

 a) Encuentre la matriz a la cul tiende Mn

7.39. Suponga que es la distribucin de estado inicial para un proceso

Markov con la siguiente matriz de transicin:

(a) Encuentre q1, q2 y q3. (b)Encuentre el vector v al cual (c)

Encuentre la matriz a la cual tiende .

(a)
 (b)

(c)

7.40. Cada ao Ana intercambia su auto por uno nuevo. Si ella tiene un Buick, lo

entrega a cambio de un Plymouth. Si ella tiene un Plymouth, lo entrega a cambio

de un Ford. Sin embargo, si ella tiene un Ford, le da lo mismo cambiarlo por un

Ford nuevo, por un Buick o por un Plymouth. En 1995, ella compr su primer auto

que era un Ford.

(a) Encuentre la probabilidad de que ella haya comprado: (i) un Buick modelo
1997, (ii) un Plymouth modelo 1998, (iii) un Ford, modelo 1998

(b) Encuentre con qu frecuencia, en el largo plazo, ella tendr un Ford. (a)

Primero se busca un vector fijo de P.

Luego nos queda multiplicar las matrices e igualar a los valores de la derecha.
 Se fija a un valor por tanto . Por tanto, es un punto fijo
de P. Puesto que

Entonces el vector

Hay una probabilidad de que Ana adquiera: i) Un Buick modelo 1997: , ii) Un Plymouth

modelo 1998: 1/3 y iii) Un Ford 1998: 1/2.

(b) Hay una probabilidad de que adquiera un Ford en un 50% en cada intercambio

PROBLEMAS VARIOS

7.41. Encuentre la matriz de transicin correspondiente a cada diagrama de transicin de

la siguiente figura:

(a)

(b)

a)
 b)

7.42. Trace un diagrama de transicin para cada matriz de transicin:

a)

b)