Referencias para aprender programación dinámica de tiempo continuo

11

¿Alguien sabe de buenas referencias para aprender programación dinámica de tiempo continuo? Las referencias no tienen que ser libros. También podrían ser enlaces a recursos en línea. Los enlaces a discusiones claras y concisas, incluso de lo básico, serían útiles.

jmbejara
fuente
¿determinista, estocástico o ambos? depende bastante de cuál.
nominalmente rígido el
1
Lo siento. Ambos serían útiles, pero en realidad tengo en mente el estocástico. ¡Gracias!
jmbejara
Solo pensé en mencionar que si vamos a hacer este tipo de preguntas, debemos seguir con la convención decidida de proporcionar 1 recomendación por respuesta.
cc7768

Respuestas:

8

Para la programación dinámica estocástica en tiempo continuo, el pequeño y no técnico Art of Smooth Pasting de Dixit es una opción maravillosa. Hace un trabajo muy efectivo de transmitir la intuición básica.

The Economics of Inaction, más reciente de Stokey, también es decente, pero para una persona de mentalidad práctica probablemente tenga un rendimiento inferior a Dixit: su longitud mucho mayor y su notación algo más pesada no producen recompensas proporcionales.


Si los procesos estocásticos subyacentes no son difusiones de Itō, entonces no estoy seguro de cuál es la mejor referencia. El caso más común que he visto (y que uso yo mismo) es el caso de discretamente muchos estados exógenos, donde si actualmente estamos en estado hay una tasa de riesgo constante λ s , s de un cambio al estado s . Afortunadamente, este es un caso bastante simple en la práctica: se puede modificar la ecuación HJB para tener en cuenta la probabilidad de flujo de cambiar de V ( , s ) a V ( , s )sλs,ssV(,s)V(,s). (Puede ver esto, por ejemplo, en las ecuaciones (1) - (5) en este documento de Acemoglu y Akcigit . Conceptualmente no es diferente de configurar la ecuación HJB cuando tenemos una difusión Itō como proceso de conducción, excepto que es más simple porque solo obtenemos un sistema de ecuaciones lineales y no necesitamos pensar en el lema de Itō, etc.)

Por supuesto, tal vez también haya una buena referencia de libro de texto para esto, pero a diferencia de los casos potencialmente mucho más complicados que involucran cálculo estocástico, esto es lo suficientemente sencillo como para que un texto nunca me haya parecido necesario.

nominalmente rígido
fuente
La economía de la inacción se ve muy bien. Lo miré un poco. Dada su descripción de The Art of Smooth Pasting , realmente me gustaría echarle un vistazo, pero parece un poco difícil de encontrar. Gracias por las recomendaciones!
jmbejara
5

Programación dinámica y control óptimo por Bertsekas

Introducción al crecimiento económico moderno por Acemoglu

El libro de Acemoglu, aunque se especializa en la teoría del crecimiento, hace un muy buen trabajo presentando una programación dinámica continua en el tiempo.

Bryce
fuente
3

Una metodología realmente buena para aproximar el HJB es el esquema de viento arriba, que aprendí bastante rápido usando las notas y códigos de Ben Moll et al.

Los ejemplos son versiones continuas de modelos económicos de agentes heterogéneos familiares como Hugget y Aiyagari.

FooBar
fuente
1

La optimización intertemporal aplicada de Klaus Wälde es un libro muy, muy bueno, incluso para aquellos que no están realmente familiarizados con las matemáticas.

El libro trata modelos deterministas y estocásticos, tanto en tiempo discreto como continuo.

Realmente diría para este libro "Optimización dinámica para tontos". No estaba familiarizado con la optimización dinámica, pero este libro me permitió pasar.

control óptimo
fuente
Este libro se ve fantástico. Amo la organización. Las tablas al principio realmente ilustran cuán minucioso es. El libro cubre la mayoría de los casos de interés y ofrece muchos ejemplos. (Disculpas por el retraso de 4 años en responder ... :))
jmbejara
1
¡Feliz de que ayude! Aprendí mucho de este libro :)
control óptimo