Programaci on Din amica II: Bellman Estoc astico con Horizonte Temporal innito

Said Y. Mej a La Rosa Universidad Nacional de Ingenier a 03 de octubre del 2013

Contenido En esta clase vamos a tratar programaci on din amica estoc astica bajo m etodo de Bellman con horizonte temporal innito Problema del Consumidor Condici on de Euler Restricci on Presupuestaria

1.
1.1.

Bloque I: Bellman Estoc astico con horizonte temporal innito

Problema del Consumidor

Modicamos el problema del consumidor bajo escenarios de incertidumbre, de la siguiente forma: J= Sujeto a las restricciones din amicas: Max Et
k=0

{Ck ,Sk+1 } k=0

k U (Ct+k )

(1)

St+1 = Yt + Rt St Ct S0 = So {Ct , St+1 } Denimos la funci on valor :

1

(2)

H (Ct , St+1 ) = Operando y reduciendo tenemos:

{Ck ,Sk+1 } k=0

Max

{Et
k=0

k U (Ct+k )}

(3)

H (Ct , St+1 ) =

{Ck ,Sk+1 } k=0

Max

{U (Ct ) + Et [
k=1

k U (Ct+k )]}

H (Ct , St+1 ) =
1 Recordemos

{Ck ,Sk+1 } k=0

Max

{U (Ct ) + Et [
k=0

k+1 U (Ct+k+1 )]}

que la funci on valor es el valor m aximo del valor actual de la funci on objetivo

H (Ct , St+1 ) =

{Ck ,Sk+1 } k=0

Max

{U (Ct ) + Et [
k=0

k U (Ct+k+1 )]}

Nos detenemos en este punto, para recordar una propiedad importante de las esperanzas condicionales:

Sean It y It+k , para todo k > 0, 2 conjuntos de informaci on, por ende: It It+k Se cumplir a que: Et (Et+k (Zt+j ) = Et+k (Et (Zt+j ) = Et (Zt+j ) Cuadro 1: Ley de Esperanzas Iteradas Aplicamos esta propiedad a la funci on valor:

H (Ct , St+1 ) =

{Ck ,Sk+1 } k=0

Max

{U (Ct ) + Et {Et+1 [
k=0

k U (Ct+k+1 )]}}

(4)

De (3), podemos obtener la funci on valor para el periodo siguiente:

H (Ct+1 , St+2 ) =

{Ck+1 ,Sk+2 } k=0

Max

{Et+1
k=0

k U (Ct+k+1 )}

(5)

Reemplazando (5) en (4), obtenemos la ecuaci on de Bellman para este caso: H (Ct , St+1 ) =
{Ck ,Sk+1 } k=0

Max

{U (Ct ) + Et {H (Ct+1 , St+2 )}}

(6)

1.2.

Condici on de Euler
2

Aplicamos C.P.O y la Ley de Walras

Ht (Ct , St+1 ) =0 St+1 Ht (Ct , St+1 ) Ct Ht+1 (Ct+1 , St+2 ) = U (Ct ) + Et =0 St+1 St+1 St+1

Utilizando la restricci on din amica: U (Ct )(1) + Et Aplicamos el Teorema de la Envolvente

3

Ht+1 (Ct+1 , St+2 ) =0 St+1

Ht+1 (Ct+1 ,St+2 ) : St+1

(7)

para hallar

Ht (Ct , St+1 ) = Efectos Directos + Efectos Indirectos St

2 N otese que se est a usando la variable St+1 para hacer las derivaciones, ya que esta es la variable din amica de la restricci on presupuestaria, pues conectapor decirlo as , 2 periodos en el modelo. Una vez hallada las condiciones de equilibrio, por Ley de Walras, se equilibrar a autom aticamente el mercado de bienes. 3 Se sugiere bien revisar el teorema de la envolvente para este problema en particular; espec camente en la parte de efectos indirectos

Como sabemos por el teorema mencionado anteriormente, los efectos indirectos desaparecen: Ht (Ct , St+1 ) Ht+1 (Ct+1 , St+2 ) St+2 Ct = U (Ct ) + Et St St St+2 St Esto es
4

(Ct+1 ,St+2 ) =0 Et Ht+1S t+2

Por lo tanto: Ht (Ct , St+1 ) = U (Ct )Rt St Ht+1 (Ct+1 , St+2 ) = U (Ct+1 )Rt+1 St+1 Reemplazando en (7), tendr amos la nueva condici on intertemporal de consumo:
5

U (Ct ) = Et {U (Ct+1 )Rt+1 }

(8)

1.3.

Restricciones Presupuestarias
=i Qt,t+i = Rt+1 Rt+2 Rt+3 ...Rt+i = k k=1 Rt+k

Denimos:

Qt,t = 1 De la Restricci on Din amica con Incertidumbre Ct + St+1 = Yt + Rt St Iteramos hacia adelante y descontamos: St+2 Yt+1 Ct+1 ] + Et [ ] = Et [ ] + St+1 Qt,t+1 Qt,t+1 Qt,t+1

Et [ Et [

Ct+2 St+3 Yt+2 St+2 ] + Et [ ] = Et [ ] + Et [ ] Qt,t+2 Qt,t+2 Qt,t+2 Qt,t+1

Y as sucesivamente, obtenemos para k periodos hacia adelante: Et [ Ct+k St+k+1 Yt+k St+k ] + Et [ ] = Et [ ] + Et [ ] Qt,t+k Qt,t+k Qt,t+k Qt,t+k1

4 Podemos 5 La

darnos cuenta tambi en de esto, viendo la CPO rezagada un periodo hacia adelante. intuici on es la misma, solo que se a nade incertidumbre, concavidad y aversi on al riesgo

Sumando horizontalmente tenemos:

k k

Et [
i=0

St+k+1 Ct+i ] + Et [ ]= Qt,t+i Qt,t+k

Et [
i=0

Yt+i ] + Rt St Qt,t+i

(9)

t+k+1 Si k , se aplica la condici on de transversalidad y la restriccion no ponzi, i.e: l mk Et [ S Qt,t+k ] = 0

6 k k

Et [
i=0

Ct+i ]= Qt,t+i

Et [
i=0

Yt+i ] + Rt St Qt,t+i

(10)

2 Ejemplo 1: Dada una funci on de preferencias cuadr aticas: U (Ct ) = aCt bCt . Asumiendo que la tasa de inter es es constante: Rt+1 = R, se pide hallar:

1.1 Perl del Consumo 1.2 Tasa de crecimiento esperado del consumo 1.3 Nivel de Consumo en t Soluci on: 1.1 De (8): Condici on de Euler:, podemos hallar el Perl del Consumo U (Ct ) a bCt RbEt (Ct+1 ) Ordenando: Et Ct+1 = (11) determina el Perl del Consumo.
Ct 1.2 Hallamos la tasa de crecimiento esperado del consumo: i.e: Ct+1 = Et [ Ct+1 ] Ct

= Et [U (Ct+1 )Rt+1 ] = = REt [a bCt+1 ] bCt + Ra a

= = Ra RbEt (Ct+1 )

R 1 1 Ct + ( )a R Rb

(11)

De (11): Et [ Ct+1 1 a R 1 1 ]= + ( )Ct = Et [1 + Ct+1 ] Ct R b R Et [Ct+1 ] = R 1 a 1 [ C 1] R b t (12)

(12) Viene a ser la tasa de crecimiento del consumo esperado.

6 Ello tienen una determinaci on econ omica l ogica: el valor presente del portafolio de activos, k + 1periodos hacia adelante debe ser cero, i.e: al nal de la vida debes haberte consumido todo lo ahorrado.

1.3 Hallamos el nivel de Consumo: Ct Tenemos (11): Et (Ct+1 ) = Descontamos por (R)i1 : Et (Ct+1 ) 1 a R 1 = Ct + (R)i1 (R)i b (R)i a R 1 1 Ct + R b R

Hacemos lo mismo, pero iterando hacia adelante: 1 a R 1 Et (Ct+2 ) = Et [Ct+1 ] + i 2 i 1 (R) (R) b (R)i1 Et (Ct+3 ) 1 a R 1 = Et [Ct+2 ] + (R)i3 (R)i2 b (R)i2

Y as sucesivamente i 1periodos hacia adelante: a R 1 1 Et [Ct+i1 ] + R b R

Et (Ct+i ) = Sumando verticalmente:

Et (Ct+i ) = Obtenemos:

1 a Ct + (R 1)[ (R)i b

i 1

k=0

1 ] (R)k+1

Et (Ct+i ) =

a 1 1 Ct + [1 ] i (R) b (R)i
i=0 ,

(13)

Dividiendo ambos lados entre Ri y aplicando Ese valor deber a ser igual a (comprobar): Ct = (

obtenemos el valor actual del consumo.

Yt+i a R R2 R2 )( [Et i ] + RSt ( )) 2 R 1 i=0 R b R 1 R2 1

(14)

2.

Bloque II: Multiplicadores de Lagrange

Ver diapositivas.