Algoritmo de Metropolis Hastings

11

Necesito estudiar los métodos de Markov Chain Monte Carlo, para ser más específico, necesito estudiar el algoritmo de Metropolis Hastings y todo lo relacionado con los criterios de convergencia.

¿Quién me puede recetar un libro, un documento o un sitio web que explique este argumento usando términos simples, pero sin ser trivial?

Neptuno
fuente

Respuestas:

12

Un excelente artículo introductorio es el de Chib y Greenberg.

Entender el algoritmo de aceleración de metrópolis

Una discusión magistral y concisa de la teoría es la de Tierney

Cadenas de Markov para explorar las distribuciones posteriores

zen
fuente
Muchas gracias. Mi objetivo principal es aprender sobre los criterios de convergencia, pero solo conozco la base de Metropolis Hastings, por lo que todo es útil.
Neptuno
1
Comienza a estudiar la convergencia con Tierney. Se encuentra un tratamiento exhaustivo en Meyn y Tweedie probabilidad.ca/MT
Zen
¿Y qué hay del recocido simulado con Metropolis Hastings? He leído esto, pero ¿qué pasa con la integración con Metropolis Hastings?
Neptuno
1
El libro de Robert y Casella discute el recocido simulado. amazon.com/Monte-Statistical-Methods-Springer-Statistics/dp/…
Zen
El enlace "Comprender ..." está roto.
EngrStudent
6

Para un libro que no es "pesado en las matemáticas", recomendaría:

Ve al Capítulo 7.

El código R se proporciona en el libro, por lo que podrá jugar con los ejemplos y ver, de manera práctica, los efectos de cambiar el número de quemados, etc.

Graeme Walsh
fuente
3

Hay un muy buen artículo de Christian Robert que describe el algoritmo MH en detalle

Robert, CP (2015). El algoritmo Metropolis-Hastings. preimpresión de arXiv arXiv: 1504.01896.

y un gran libro sobre los métodos de Monte Carlo en general del mismo autor

Robert, C. y Casella, G. (2013). Métodos estadísticos de Monte Carlo. Springer Science & Business Media.

Tim
fuente
0

Con respecto a los criterios de convergencia, la mayor parte del trabajo sobre convergencia es el sentido de distancia de variación total (TV). Principalmente porque hay mucha teoría de probabilidad elaborada para la distancia de televisión. Hay un buen trabajo de encuesta y también en el lado teórico está el trabajo de Roberts y Rosenthal que ofrece varios teoremas sobre los criterios de convergencia. En el lado más práctico, hay varios documentos escritos por Jim Hobert que proporcionan ejemplos de la aplicación de uno de los teoremas de Roberts y Rosenthal a MCMC. En general, la parte difícil de aplicar ese teorema parece ser una buena función de deriva de Lyapunov.

Lucas Roberts
fuente
-1

Aquí hay una analogía cruda que he usado para dar el sabor de MHA: la próxima vez que estés en el supermercado:

  1. Coge un artículo al azar y ponlo en tu carrito.

  2. Agarra otro objeto con tu mano derecha.

  3. Si el artículo en su mano tiene un precio menor que el último artículo que cargó, póngalo en su carrito.

  4. De lo contrario, coloque el artículo en su carrito con probabilidad (precio de último) ÷ (precio en mano) de lo contrario resálvelo.

  5. Repita los pasos 2 a 4 hasta veintinueve artículos adicionales en su carrito.

  6. Retire los primeros 15 artículos de su carrito.

  7. Pagar y desearle al cajero un día agradable.

  8. Pase el carrito a su auto.

  9. Conduce a casa.

Ferdi
fuente