CADENAS DE MARKOV

Sea Xt la variable aleatoria para t0, t1, t2, , tn, donde

t0 < t1

< t2

< <

tn.

Sea E0, E1, E2, , Ej para j=0,1, 2, 3, los estados exhaustivos y mutuamente excluyentes
de un sistema en cualquier tiempo.
Sea aj(0) la probabilidad absoluta de que el sistema se encuentre en el estado Ej en el tiempo to.
A (0)
= { a0 (0) , a1 (0) , a2 (0) , , an (0) }
Sea pij la probabilidad de transicion o condicional de estar en el estado j dado que el periodo
anterior estaba en el estado i.
pij = P { X tm = j | X t m-1 = i }
Estas probabilidades dan origen a la matriz de transiciones P

P =

donde

p 00
p 10
p 20
.
.
p n0

p 01
p 11
p 21
.
.
p n1

p ij >= 0

p 02
p 12
p 22
.
.
p n2

p 0n
p 1n
p 2n
.
.
p nn

p ij = 1 para toda i

j=0,1, n

El comportamiento futuro del sistema se puede predecir en base a :

Para el periodo 1

aj (1)

a1 (0) p 1j + a2 (0) p 2j + an (0) p nj

Para el periodo 2

aj (2)

a1 (0) p 1j (2) + a2 (0) p 2j (2) + an (0) p nj (2)

Para el periodo m

aj (m)

a1 (0) p 1j (m) + a2 (0) p 2j (m) + an (0) p nj (m)

En la notacion matricial

A (m)

A (0) x P (m)

A 1xn (0) x P nxn (m)

P nxn (m) x A nx1 (0)

Donde m significa el comportamiento a largo plazo.

Cadena de Markov irreductible, cuando se comunican todos los estados.
Estados de conjunto cerrado, cuando llega a un estado, permanece indefinidamente
Estados de conjunto absorvente, cuando p ij = 1.
Sea f jj la probabilidad de que regrese al estado j, entonces: pjj = f jj (1)
f jj (m) = p jj (m) - m f jj (m) p jj (n-m)
f 22 (5) = p 22 (5) - f 22 (1) p 22 (4) - f 22 (2) p 22 (3) - f 22 (3) p 22 (2) - f 22 (4) p 22 (1)
Sea u jj el tiempo de recurencia media de la cadena:
u jj = n f jj (m).
Clase de estado de la cadena
1. Un estado es transitorio si fjj <1, es decir
2. Un estado es recurrente si fjj = 1.

u jj = infinito

3. Un estado recurrente es nulo si ujj es infinito.

4. Un estado es peridico con perodo t si un regreso es posible en t, 2t, 3t .
5. Un estado es ergdico si es nulo y aperiodico.
Aplicacin de notacin de Cadenas de Markov
X t : Preferencia de marca de las bebidas gaseosas, en el periodo t, de una poblacin.
Estados exhaustivos y mutuamente excluyentes. Se descartar marcas pequeas o locales.
E1: Kola Real; E2: Concordia;
E3:Inka Cola; E4:Coca Cola.
j = 0,1,2,3
n=3.
Probabilidad absoluta:
A (0) = { 22%, 30%, 25%, 23% }
Equivalente a la participacion de mercado o la probabilidad de la preferencia de la marca en t 0.
a0 (0)
a1 (0)
a2 (0)
a3 (0)

j \ i
0
1
2
3

=
=
=
=

probabilidad de que al hacer un muestreo en la poblacin se prefiera a Kola Real.

probabilidad de que al hacer un muestreo en la poblacin se prefiera a Concordia.
probabilidad de que al hacer un muestreo en la poblacin se prefiera a Inka Cola.
probabilidad de que al hacer un muestreo en la poblacin se prefiera a Coca Cola.

Probabilidades de transicin p ij
0
1
0.795
0.133
0.091
0.767
0.045
0.017
0.068
0.083
1.000
1.000
P 00
P 11
P 22
P 33
ganancias
P 01
P 02
P 03
perdidas
P 10
P 20
P 30

2
0.000
0.109
0.891
0.000
1.000

3
0.040
0.060
0.040
0.860
1.000

La marca Kola Real retiene a sus clientes con una probabilidad de 79.5%
La marca Concordia retiene a sus clientes con una probabilidad de 76.7%
La marca Inka Kola retiene a sus clientes con una probabilidad de 89.1%
La marca Coca Cola retiene a sus clientes con una probabilidad de 86.1%
Existe una probabilidad de 13.3 % para Kola Real de ganar clientes de Concordia.
Existe una probabilidad de 0.0 % para Kola Real de ganar clientes de Inka Cola .
Existe una probabilidad de 4.0 % para Concordia de ganar clientes de Cola Cola.
Existe una probabilidad de 9.1 % para Concordia de ganar clientes de Kola Real.
Existe una probabilidad de 4.5 % para Inka Cola de ganar clientes de Kola Real.
Existe una probabilidad de 6.8 % para Coca Cola de ganar clientes de kola Real.

La preferencias para el perodo siguiente seran:

P (1)

0.795
0.091
0.045
0.068
1.000

0.133
0.767
0.017
0.083
1.000

0.000
0.109
0.891
0.000
1.000

0.040
0.060
0.040
0.860
1.000

A (1) = P (1) x A (0)

22.00%
30.00%
25.00%
23.00%
PERIODO m
22.72%

PERIODO 1
22.42%
29.10%
24.70%
23.78%
VARIACION
0.30%

P (m)

Participacin de mercado en equilibrio:

22.00%
0.795
0.133
0.000
0.040

30.00%
0.091
0.767
0.109
0.060

25.00%
0.045
0.017
0.891
0.040

23.00%
0.068
0.083
0.000
0.860

0.2242 0.29097391 0.24702609

0.2378

26.76%
23.54%
26.99%
A (1)t = A (0)t x P (1)
1.000
1.000
1.000
1.000

-2.34%
-1.17%
3.21%

) - f 22 (4) p 22 (1)

CADENAS MARKOV APLIC. AL MARKETING

CASO: BEBIDAS GASEOSAS
MARCAS
KOLA REAL
CONCORDIA
INKA COLA
COCA COLA
toal muestreo

MARCAS
KOLA REAL
CONCORDIA
INKA COLA
COCA COLA
total muestreo

MUESTRA
MUESTRA VARIACION
PERIODO 1 PERIODO 2
220
225
5
300
290
-10
230
230
0
250
255
5
1000
1000
0

% VARIAC.

GANANCIAS PERDIDAS VARIACION

PERIODO 2 PERIODO 2
50
45
5
60
70
-10
25
25
0
40
35
5
175
175
0

% VARIAC.

2.27%
-3.33%
0.00%
2.00%

0.22

220
300
230
250

175
230
205
215

10.00%
-16.67%
0.00%
12.50%

MATRIZ DE GANACIAS
KOLA REAL
KOLA REAL
CONCORDIA
INKA COLA
COCA COLA

0
20
10
15

CONCORDIA INKA COLA COCA COLA

40
0
10
0
25
15
5
0
10
25
0
0

TOTALES
50
60
25
40

MATRIZ DE PERDIDAS
KOLA REAL
KOLA REAL
CONCORDIA
INKA COLA

0
40
0

CONCORDIA INKA COLA COCA COLA

20
10
15
0
5
25
25
0
0

TOTALES
45
70
25

220

COCA COLA

10

15

10

35

MATRIZ DE TRANSICION

KOLA REAL
CONCORDIA
INKA COLA
COCA COLA
TOTALES P 1

0
1
2
3

KOLA REAL CONCORDIA INKA COLA COCA COLA TOTALES P 2

175
40
0
10
225
20
230
25
15
290
10
5
205
10
230
15
25
0
215
255
220
300
230
250
1000

MATRIZ DE PROBABILIDADES DE TRANSICION

0
1
2
3
KOLA REAL CONCORDIA INKA COLA COCA COLA TOTALES P 2
KOLA REAL
0.7955
0.1333
0.0000
0.0400
0.9688
CONCORDIA
0.0909
0.7667
0.1087
0.0600
1.0263
INKA COLA
0.0455
0.0167
0.8913
0.0400
0.9934
COCA COLA
0.0682
0.0833
0.0000
0.8600
1.0115
TOTALES P 1
1.000
1.000
1.000
1.000

P 00
P 11
P 22
P 33

La marca Kola Real retiene a sus clientes con una probabilidad de 79.5%
La marca Concordia retiene a sus clientes con una probabilidad de 76.7%
La marca Kola Real retiene a sus clientes con una probabilidad de 89.1%
La marca Coca Cola retiene a sus clientes con una probabilidad de 86.1%

P 01
P 02
P 03

Existe una probabilidad de 13.3 % para Kola Real de ganar clientes de Concordia.
Existe una probabilidad de 0.0 % para Kola Real de ganar clientes de Inka Cola .
Existe una probabilidad de 4.0 % para Kola Real de ganar clientes de Cola Cola.

P 10
P 20
P 30

Existe una probabilidad de 9.1 % para Kola Real de perder clientes a favor de Concordia.
Existe una probabilidad de 4.5 % para Kola Real de perder clientes a favor de Inka Cola.
Existe una probabilidad de 6.8 % para Kola Real de perder clientes a favor de Coca Cola.

P 10
P 12
P 13

Existe una probabilidad de 9.1 % para Concordia de ganar clientes de la marca Kola Real.
Existe una probabilidad de 10.9 % para Concordia de ganarNo gana nada
Existe una probabilidad de 6.0 % para Concordia de ganar clientes de la marca Coca Cola.

P 01
P 21
P 31

Existe una probabilidad de 13.3 % para Concordia de perder clientes a favor de Kola Real.
Existe una probabilidad de 1.7 % para Concordia de perder clientes a favor de Inka Cola.
Existe una probabilidad de 8.3 % para Concordia de perder clientes a favor de Coca Cola.

A partir de estos datos se puede hacer ajustes en el Plan de marketing (promocin) y ser un instrumento de evaluacin.
La suposicin basica es que los clientes compran marcas basadas en sus preferencias presentes y no consideran sus
preferencias pasadas, para cumplir con la propiedad markoviana o de "falta de memoria".
Una aplicacin practica es la estimacin de participaciones de mercado en perodos futuros a partir de la participacin
Por ejemplo como sera la estimacin para el perodo siguiente, si la participacion de mercado actual es:
MARCAS
KOLA REAL
CONCORDIA
INKA COLA
COCA COLA
TOTAL

P (1)

(2)

% DE PARTICIP.
PERIODO 1
22.00%
30.00%
25.00%
23.00%
100.00%

0.79545
0.09091
0.04545
0.06818
1.00000

0.13333
0.76667
0.01667
0.08333
1.00000

0.00000
0.10870
0.89130
0.00000
1.00000

0.04000
0.06000
0.04000
0.86000
1.00000

0.6476
0.1510
0.0809
0.1204

0.2116
0.6067
0.0370
0.1446

0.0145
0.1802
0.7962
0.0091

0.0742
0.1056
0.0729
0.7473

% PART Merc
22.00%
30.00%
25.00%
23.00%

22.00%
30.00%
25.00%
23.00%

PERIODO 2
22.42%
29.10%
24.70%
23.78%

0.79545
0.09091
0.04545
0.06818

PERIODO 3
22.66%
28.46%
24.47%
24.40%

0.64759642
0.15104264
0.08091328
0.12044766

P (3)

P (4)

0.5401
0.1907
0.1089
0.1603

0.2550
0.4971
0.0585
0.1894

0.0359
0.2266
0.7137
0.0238

0.1030
0.1405
0.1000
0.6566

0.4615
0.2168
0.1312
0.1906

0.2767
0.4220
0.0796
0.2217

0.0597
0.2560
0.6425
0.0418

0.1269
0.1673
0.1224
0.5834

22.00%
30.00%
25.00%
23.00%

22.00%
30.00%
25.00%
23.00%

PERIODO 4
22.80%
28.00%
24.29%
24.90%
PERIODO 5
22.87%
27.68%
24.15%
25.31%

Condiciones de equilibrio:
a0 (n)
a1 (n)
a2 (n)
1.000

(n)

=
=
=
=

0.795
0.091
0.045
1.000

a0 (n)
a0 (n)
a0 (n)
a0 (n)

+
+
+
+

0.133
0.767
0.017
1.000

a1 (n)
a1 (n)
a1 (n)
a1 (n)

+
+
+
+

0.000 a2 (n) + 0.040 a3 (n)

0109 a2 (n) + 0.060 a3 (n)
0.891 a2 (n) + 0.040 a3 (n)
1.000 a2 (n) + 1.000 a3 (n)

-0.2045
0.0909
0.0455
1.0000

0.1333
-0.2333
0.0167
1.0000

0.0000
0.1087
-0.1087
1.0000

0.0400
0.0600
0.0400
1.0000

0.000
0.000
0.000
1.000

0.133
-0.233
0.017
1.000

0.000
0.109
-0.109
1.000

0.040
0.060
0.040
1.000

-0.205
0.091
0.045
1.000

0.000
0.000
0.000
1.000

0.000
0.109
-0.109
1.000

0.040
0.060
0.040
1.000

-0.205

0.133

0.000

0.040

0.000
0.000
0.000
1.000
ai(0)
22.00%
30.00%
25.00%
23.00%

a0
a1
a2
a3

PERIODO n
22.72%
26.76%
23.54%
26.99%
ai(n)
22.719%
26.756%
23.535%
26.990%

0.72%
-3.24%
-1.46%
3.99%

0.091
0.045
1.000

-0.233
0.017
1.000

0.000
0.000
1.000

0.060
0.040
1.000

-0.205
0.091
0.045
1.000

0.133
-0.233
0.017
1.000

0.000
0.109
-0.109
1.000

0.000
0.000
0.000
1.000

Inversa de matriz
-4.251846289 -1.407184879 0.682939041 0.227187383
-0.461885092 -3.47540368 -1.0138941 0.267555389
-0.083489798 0.493741394 -6.54099387 0.235354863
4.7972211791 4.388847165 6.87194893 0.269902366

0.000
0.000
0.000
1.000

0.22718738
0.26755539
0.23535486
0.26990237

-0.205
0.133
0.000
1.000

0.091
-0.233
0.109
1.000

0.046
0.017
-0.109
1.000

0.068
0.083
0.000
1.000

0.000
0.000
0.000
1.000

0.25
0.25
0.25
0.25

-0.204
0.091
0.046
1.000

0.133
-0.233
0.017
1.000

0.000
0.109
-0.109
1.000

0.040
0.060
0.040
1.000

0.000
0.000
0.000
1.000

0.227494
0.268348
0.236194
0.267964

0.796
0.133
0.000
0.040

0.091
0.767
0.109
0.060

0.046
0.017
0.891
0.040

0.067
0.083
0.000
0.860

0.000
0.000
0.000
1.000

-0.08673044

0.13333
0.76667
0.01667
0.08333

0.00000
0.10870
0.89130
0.00000

0.04000
0.06000
0.04000
0.86000

0.21161616
0.60671058
0.03702679
0.14464646

0.01449275
0.18021424
0.79623503
0.00905797

0.07421818
0.10558419
0.07287036
0.74732727

0.79545
0.09091
0.04545
0.06818

0.13333
0.76667
0.01667
0.08333

0.00000
0.10870
0.89130
0.00000

0.04000
0.06000
0.04000
0.86000

La marca de gaseosas Inka Cola, quiere reducir el impacto de reduccin de su participacin

de 30% a 35.1% , en condiciones de equilibrio. Para lo cual a elaborado un Plan de Mkt
donde se considera hacer una campaa publicitaria. Tiene como alternativa el uso 3 medios:
Radio, TV o perodico.
Realiza un estudio preliminar, determinado las matrices de transicin de las marcas, segn

0
1
2
3

0
1
2
3

0
1
2
3

MEDIO RADIO
MATRIZ DE PROBABILIDADES DE TRANSICION
0
1
2
3
KOLA REAL
CONCORDIA INKA COLA
COCA COLA
KOLA REAL
0.790
0.127
0.000
0.040
CONCORDIA
0.057
0.780
0.109
0.060
INKA COLA
0.085
0.013
0.891
0.040
COCA COLA
0.068
0.080
0.000
0.860
TOTALES P 1
1.000
1.000
1.000
1.000

MEDIO TV
MATRIZ DE PROBABILIDADES DE TRANSICION
0
1
2
3
KOLA REAL
CONCORDIA INKA COLA
COCA COLA
KOLA REAL
0.790
0.070
0.000
0.040
CONCORDIA
0.057
0.835
0.109
0.060
INKA COLA
0.085
0.015
0.891
0.040
COCA COLA
0.068
0.080
0.000
0.860
TOTALES P 1
1.000
1.000
1.000
1.000

MEDIO PERIODICO
MATRIZ DE PROBABILIDADES DE TRANSICION
0
1
2
3
CONCORDIA INKA COLA KOLA REAL
COCA COLA
KOLA REAL
0.790
0.120
0.000
0.040
CONCORDIA
0.057
0.790
0.109
0.060
INKA COLA
0.085
0.010
0.891
0.040
COCA COLA
0.068
0.080
0.000
0.860
TOTALES P 1
1.000
1.000
1.000
1.000

TOTALES P 2
0.957
1.006
1.029
1.008

TOTALES P 2
0.900
1.061
1.031
1.008

TOTALES P 2
0.950
1.016
1.026
1.008

Para tomar estas decisiones, requiere establecer polticas de publicidad, tomando en

consideracin el comportamiento y lealtad de sus clientes.
1. Si las ventas se reducen en 5% solo hacer uso de los periodicos
2. Si esta se reducen en 8% hacer uso de la radio
3. Si esta baja a los niveles mayores a 10% hacer uso de la TV.
Para cada politica se establece un costo o beneficio, a partir del cual se selecciona el
mejor.

KOLA REAL
CONCORDIA
INKA COLA
COCA COLA
TOTALES P 1

CONCORDIA
0.795
0.091
0.045
0.068
1.000

INKA COLA KOLA REAL

COCA COLA
0.133
0.000
0.040
0.767
0.109
0.060
0.017
0.891
0.040
0.083
0.000
0.860
1.000
1.000
1.000

TOTALES P 2
0.969
1.026
0.993
1.012

Aplicacin 2: Pronostico de Elecciones Presidenciales

Prob. absoluta al

0
1
2
3
4
5

Candidatos
Keiko Fujimori
Nadine Heredia
Alan Garcia
PP Kuczynski
No sabe aun
Otros
Total

1/28/2014

802 Prob. Abs. al

Preferencias %
28%
25%
14%
11%
13%
9%
100%

4.1%
10.8%
-2.2%
-2.9%
-7.4%
-2.5%

32.1%
35.8%
11.8%
8.1%
5.6%
6.5%
100.0%

4/9/2016

0.3213
0.3581
0.1182
0.0811
0.0565
0.0648
1.0000

Matriz de probabilidades de transicin

Estados \ Estados
Keiko Fujimori
Nadine Heredia
Alan Garcia
PP Kuczynski
No sabe aun
Otros

Keiko Fujimori

0.80
0.08
0.02
0.05
0.02
0.03
1.00
Despues de 802 dias en esquilibrio
Keiko Fujimori
Nadine Heredia
Alan Garcia
PP Kuczynski
No sabe aun
Otros

Acciones
Hacer publicidad en TV

-0.20
0.08
0.02
0.05
0.02
1.00

Nadine Heredia

Alan Garcia

PP Kuczynski

No sabe aun

Otros

0.05
0.75
0.03
0.02
0.06
0.09
1.00

0.05
0.15
0.60
0.10
0.05
0.05
1.00

0.08
0.12
0.10
0.50
0.10
0.10
1.00

0.20
0.30
0.16
0.04
0.20
0.10
1.00

0.35
0.30
0.20
0.05
0.05
0.05
1.00

1.53
1.70
1.11
0.76
0.48
0.42

0.05
-0.25
0.03
0.02
0.06
1.00

0.05
0.15
-0.40
0.10
0.05
1.00

0.08
0.12
0.10
-0.50
0.10
1.00

0.20
0.30
0.16
0.04
-0.80
1.00

0.35
0.30
0.20
0.05
0.05
1.00

0.00
0.00
0.00
0.00
0.00
1.00

0.321
0.358
0.118
0.081
0.056
0.065

Estados \ Estados
Keiko Fujimori
Nadine Heredia
Alan Garcia
PP Kuczynski
No sabe aun
Otros

Keiko Fujimori

Nadine Heredia

0.82
0.04
0.07
0.79
0.02
0.02
0.04
0.02
0.02
0.06
0.03
0.08
1.00
1.01
inversiones en publicidad en millones nuevos soles
Estados \ Estados
Keiko Fujimori
Nadine Heredia
Keiko Fujimori
5.00
1.00
Nadine Heredia
2.00
6.00
Alan Garcia
1.00
0.80
PP Kuczynski
1.00
0.50
No sabe aun
0.50
0.20
Otros
0.70
0.60

Alan Garcia

0.05
0.15
0.62
0.09
0.04
0.05
1.00
Alan Garcia

0.50
1.00
4.00
0.50
0.10
0.60

PP Kuczynski

0.07
0.12
0.10
0.52
0.09
0.10
1.00
PP Kuczynski

0.80
1.00
0.50
4.00
0.20
0.50

No sabe aun

0.21
0.31
0.16
0.04
0.18
0.10
1.00
No sabe aun

0.20
0.30
0.30
0.20
0.20
0.10

Otros

0.35
0.31
0.20
0.05
0.05
0.04
1.00

-0.18
0.07
0.02
0.04
0.02
1.00

Otros

0.30
0.40
0.40
0.30
0.30
1.00

Hacer publicidad en radio

Estados \ Estados
Keiko Fujimori
Nadine Heredia
Alan Garcia
PP Kuczynski
No sabe aun
Otros

Keiko Fujimori

Nadine Heredia

0.81
0.05
0.08
0.77
0.02
0.02
0.05
0.02
0.02
0.05
0.02
0.09
1.00
1.00
inversiones en publicidad en millones nuevos soles
Estados \ Estados
Keiko Fujimori
Nadine Heredia
Keiko Fujimori
3.00
0.50
Nadine Heredia
1.00
2.50
Alan Garcia
0.80
0.70
PP Kuczynski
0.80
0.30
No sabe aun
0.40
0.10

Alan Garcia

0.05
0.15
0.61
0.10
0.04
0.05
1.00
Alan Garcia

0.40
0.80
2.00
0.30
0.10

PP Kuczynski

0.08
0.13
0.11
0.52
0.06
0.10
1.00
PP Kuczynski

0.80
0.70
0.50
2.00
0.10

No sabe aun

0.22
0.32
0.16
0.04
0.18
0.08
1.00
No sabe aun

0.20
0.30
0.30
0.20
0.10

Otros

0.35
0.31
0.20
0.05
0.05
0.04
1.00
Otros

0.30
0.40
0.40
0.30
0.30

-0.19
0.08
0.02
0.05
0.02
1.00

Otros

0.40

0.20

0.40

0.40

0.10

0.60

0.04
-0.21
0.02
0.02
0.06
1.00

0.05
0.15
-0.38
0.09
0.04
1.00

0.07
0.12
0.10
-0.48
0.09
1.00

0.21
0.31
0.16
0.04
-0.82
1.00

0.35
0.31
0.20
0.05
0.05
1.00

0.00
0.00
0.00
0.00
0.00
1.00

0.318383
0.38878938
0.10901763
0.0735515
0.05308999
0.05716852

0.05
-0.27
0.02
0.02
0.05
1.00

0.05
0.15
-0.39
0.10
0.04
1.00

0.08
0.13
0.11
-0.48
0.06
1.00

0.22
0.32
0.16
0.04
-0.82
1.00

0.35
0.31
0.20
0.05
0.05
1.00

0.00
0.00
0.00
0.00
0.00
1.00

0.34110755
0.34204626
0.11453237
0.08492744
0.04536865
0.07201773

16-2.2
0

a)

0 a1

0 1-a1

0 Subio hoy y ayer

1 a2

0 1-a2

1 Subio hoy y Bajo ayer

0 a3

0 1-a3

2 Bajo hoy y Subio ayer

0 a4

0 1-a4

3 Bajo hoy y ayer

0.8

0.2

0 Subira Maana y sube hoy

0.7

0.3

1 Subira Maana y Bajo hoy

0.6

0.4

2 Bajara Maana y Subio hoy

0.5

0.5

3 Bajara Maana y bajo hoy

0.8

0.7

1.5

0.8

0.7

0
0.2
0
1

0
0.3
0
1

0.6
0
0.4
1

0.5
0
0.5
1

1.1
0.5
0.9

0
0.2
0

0
0.3
0

0.6
0
0.4

0.5
0
0.5

0.64
0.12
0.16
0.08
1

0.56
0.18
0.14
0.12
1

0.42
0.2
0.18
0.2
1

0.35
0.25
0.15
0.25
1

1.97
0.75
0.63
0.65

0.64
0.12
0.16
0.08

0.56
0.18
0.14
0.12

0.42
0.2
0.18
0.2

0.35
0.25
0.15
0.25

0.9341
0.0659
1
0.9254
0.0746
1

0.0659
0.9341
1
0.0746
0.9254
1

16-2.3

0
1
2
3
4
5
6
7

16-3.2
0
1
P(0)

P(1)

P(2)

Subio Hoy, Ayer y Antiayer

Bajo Hoy,Ayer, Antiayer
Subio Hoy, Ayer y Bajo Antiayer
Subio Hoy y bajo ayer y antiayer
Bajo Hoy,Ayer y Subio Antiayer
Bajo Hoy Subio Ayer y Antiayer
Bajo Hoy Subio Ayer y Bajo Antiayer
Subio Hoy Bajo Ayer y Subio Antiayer
0
0.99
0.01

1
0.01
0.99

0.99
0.01
1
0.9802
0.0198
1
0.9706
0.0294
1

0.01
0.99
1
0.0198
0.9802
1
0.0294
0.9706
1

P(6)

P(7)

P(3)

0.9612
0.0388
1
0.952
0.048
1
0.9429
0.0571
1

0.0388
0.9612
1
0.048
0.952
1
0.0571
0.9429
1

0
0.1
0.6
0.3
0.1
1.1

1
0.2
0.4
0.3
0.2
1.1

2
0.3
0
0.4
0.3
1

3
0.4
0
0
0.4
0.8

0.1
0.2
0.3
0.4

0.6
0.4
0
0

0.3
0.3
0.4
0

0.1
0.2
0.3
0.4

-0.9
0.2
0.3
1

0.6
-0.6
0
1

0.3
0.3
-0.6
1

0.1
0.2
0.3
1

0
1

0
0.5
0.25

1
0.5
0.75

1
1

0
1

0
-1
0

1
3
1

0
1

0
0.75
0.5

1
0.25
0.5

1
1

0
1

0
0
0

1
4
2

0
1

0
0.5
0.5

1
0.5
0.5

1
1

0
1

0
-1
0

1
3
2

P(4)

P(5)

16-5.5
0
1
2
3

P(8)

P(9)

P(10)

0.0831
0.9169
1
0.0915
0.9085
1
0.0996
0.9004
1

0.3
0.28
0.18
0.24

0.33
0.3
0.25
0.12

1
1
1
1

0.26
0.27
0.27
0.2
0
0
0
1

0.288
0.280
0.240
0.192

pij
16-5.6
Bajo
Alto

0.9169
0.0831
1
0.9085
0.0915
1
0.9004
0.0996
1

0.26
0.27
0.27
0.2
3.4722
3.5714
4.1667
5.2083

Cij

16-2-1
0

0: llueva

0.5

0.5

1: claro

0.1

0.9

-0.5
1

0.1
1

0
0
0.5
0
0
0.5

1
0.5
0
0.5
0
0

2
0
0.5
0
0.5
0

3
0
0
0.5
0
0.5

4
0.5
0
0
0.5

-1
0.5
0
0

0.5
-1
0.5
0

0
0.5
-1
0.5

0
0
0.5
-1

0.5
0
0
0.5

0 0.167
1 0.833

16-3-3
0
1
2
3
4

0
0
0
0

0.2
0.2
0.2
0.2

0.2

1.

Una empresa est viendo el impacto en el mercado de un nuevo canal de TV "A" en base a encuestas real

2.
Se tiene registrada la vida de un componente electrnico:
Edad en mes
0
1
2
3
4
5
Nm. compon
1000
950
874
769
615
0
a.
Si cada componente se remplaza despus de la falla si tiene ms de 2 meses por uno nuevo, en caso contr
b.
Cuantos meses en promedio dura un componente nuevo?(4)

3.
Se plantea un juego que consiste en elegir cinco nmero entre 1 y 25 y se apunta en un ticket. Luego una m
4. Tres tanques: A, B y C, entran en una batalla triple. El tanque A tiene una probabilidad de 1/3 de destruir su blan

1)
estado 1
esado 2

Ver TV NA
Ver TV A

1
2

1
0.9
0.6

p1
p2

0.9
0.1

2
0.1
0.4

1
2

70%
10%
0.1
0.37
0.127

2h

0.873
0.800

0.127
0.200

3h

0.866
0.846

0.134
0.154

4h

0.864
0.858

0.136
0.142

5h

0.863
0.862

0.137
0.138

6h

0.863
0.863

0.137
0.137

7h

0.863
0.863

0.137
0.137

0
1000
0

1
950
50
0

f jj (m) = p jj (m) - m f jj (m) p jj (n-m)

f21 = p21(m) - f21(m)p21(n-m)

1
1
m
1

Nmeses
Ncompon

2
874
126
76
0

f21(m)
0.6300

0.256 0.5437076576

0.081 0.7649913684

0.023 0.8349421569

0.007 0.8552272457

0.002 0.8608796523

0.000 0.8624326531

Uij =

2)

2
0.1
0.3

30%

90%
0.9
0.63
0.873

1h

1
0.9
0.7

3
769
231
181
105
0

1.512572725 horas
1.000 para 2 a 1

4
615
385
335
259
154
0

5
0
1000
950
874
769
615

1
2
3
4
5

1
0.050
0.126
0.231
0.385
1.000

2
0.000
0.080
0.191
0.353
1.000

3
0.000
0.000
0.120
0.296
1.000

4
0.000
0.000
0.000
1.137
1.000

5
0.000
0.050
0.000
0.206
0.000 0.5416636156
0.000 2.170511214
1.000
5

de TV "A" en base a encuestas realizadas respecto a sus hbitos al ver TV de hora en hora a lo que respondieron que los jvenes que

meses por uno nuevo, en caso contrario por un repuesto de la misma edad, determnese la matriz de transicin asociada con este proc

se apunta en un ticket. Luego una mquina escoge al azar entre 25 bolillas numeradas del 1 al 25. Si el apostador acierta en una o dos
obabilidad de 1/3 de destruir su blanco, B tiene una probabilidad de de hacer lo mismo y para C la probabilidad es 1/6. Los tanques d

- m f jj (m) p jj (n-m)
21(m)p21(n-m)

f21(1) = p21(1)
0.54370766 f21(2) = p21(2) - f21(1)*p21(7)
0.22128371 f21(3) = p21(3) - f21(1)*p21(7) - f21(2)*p21(6)
0.06995079 f21(4) = p21(4) - f21(1)*p21(7) - f21(2)*p21(6) - f21(3)*p21(5)
0.02028509 f21(5) = p21(5) - f21(1)*p21(7) - f21(2)*p21(6) - f21(3)*p21(5) - f21(4)*p21(4)
0.00565241 f21(6) = p21(6) - f21(1)*p21(7) - f21(2)*p21(6) - f21(3)*p21(5) - f21(4)*p21(4) - f21(5)*p21(3)
0.001553 f21(7) = p21(7) - f21(1)*p21(7) - f21(2)*p21(6) - f21(3)*p21(5) - f21(4)*p21(4) - f21(5)*p21(3) - f21(6)*p21(

dieron que los jvenes que contina viendo el canal de costumbre con probabilidad de 0,9 y el resto si cambia a canal A; y si estn en

in asociada con este proceso. Considrese que un remplaza durante el mes equivale a un remplaza al final del mes.(3)

stador acierta en una o dos bolillas no hay premio pero con 3 bolillas, te devuelve lo apostado, si se acierta en 4 ganas cuatro veces d
bilidad es 1/6. Los tanques disparan al mismo tiempo y cada uno le dispara al oponente ms fuerte que an no ha sido destruido. Si se

0.9

0.37

0.096 0.77672523

0.149 0.05071833

0.006 0.08309156

0.083 0.02048572
0.07120406
0.059 0.01144071
0.08264476
0.047 0.00834259
0.09098735
0.039 0.00727327
0.09826062
0.031 0.0078081
0.10606872
1.06663838 hora
0.778 de 2 a 2

-0.001 0.00508708
-0.001 -0.00100381

21(5)*p21(3)

0.000 -0.00059716

21(5)*p21(3) - f21(6)*p21(

0.000 -0.00020613
1.10023371 horas
1.000 de 1 a 1

a canal A; y si estn en canal A continan vindolo la siguiente hora con probabilidad de 0,4. En el caso del resto de encuestados (que

4 ganas cuatro veces de lo apostado y si se acierta 5 se obtiene el premio mayor. Un apostador empedernido va a aplicar estrategia. C
ha sido destruido. Si se considera que los estados son los tanques sobrevivientes en cada etapa, elaborar una cadena de Markov

sto de encuestados (que corresponde al 30% de la poblacin en inters) si est viendo otro canal, cambia a canal A con probabilidad de

va a aplicar estrategia. Cada vez que gana algn premio, para el siguiente juego apuesta todo lo ganado. S, no ganara nada, por lo m
cadena de Markov

nal A con probabilidad de 0,1y si est viendo canal A contina vindolo con probabilidad de 0,3. Formular como una cadena de markov

no ganara nada, por lo menos apostar un boleto siempre. Despus de cuantos juegos se espera que el apostador gane el premio may

o una cadena de markov y responder: Qu porcin de mercado corresponde a canal A finalmente?(3), Si una persona est viendo cana

ador gane el premio mayor.(6)

ersona est viendo canal A, despus de cuantas horas se espera que est viendo otro canal?(3).

Agencia de viajes para los estados no viajar, viaje local y viaje al exterior
NV
VL
VE
NV
40
20
40
100
VL
50
10
40
100
VE
10
70
20
100
Matriz de Transicin Pij
1
2
1
0.4
0.2
2
0.5
0.1
3
0.1
0.7

-0.6
0.2
1

0.5
-0.9
1

P(m=2)
3
0.4
0.4
0.2

1
1
1

0.1
0.7
1

0 0.33333333
0 0.33333333
1 0.33333333

0.3
0.29
0.41

0.38
0.39
0.23

Tiempo de primera pasada

Matriz de transicion- inventarios
0
0
0.08
1
0.632
2
0.264
3
0.08
1.056
0
1
2
3

-0.92
0.184
0.368
1

1
0.184
0.368
0.368
0.184
1.104

2
0.368
0
0.368
0.368
1.104

3
0.368
0
0
0.368
0.736

1
1
1
1

0.632
-0.632
0
1

0.264
0.368
-0.632
1

0.08
0.184
0.368
1

0
0
0
1

0.28565411
0.28483488
0.26318076
0.16633024

U 13 = 1 + p11 U13 + p12 U 23

U 23 = 1 + p21 U23 + p22 U 23
0.32
0.32
0.36

U 13

U 23
0.6
-0.5

U 10 =
U 20 =
U 30 =
U 10
0.632
-0.368
-0.184

-0.2
0.9

1
1

2.5
2.5

1 + p11 U10 + p12 U20 + p13 U30

1 + p21 U10 + p22 U20 + p23 U30
1 + p31 U10 + p32 U20 + p33 U30
U 20
0
0.632
-0.368

U 30
0
0
0.632

Tiempo promedio de retorno

1 1.58227848 U 10
1 2.50360519 U 20
1 3.50073726 U 30