Documento sobre la realización de pruebas de hipótesis basadas en el resultado de otra prueba

Es bien sabido que es problemático elegir una prueba estadística basada en el resultado de otra prueba estadística, ya que los valores p son difíciles de imposibles de interpretar (por ejemplo, elegir una prueba estadística basada en el resultado de otra (por ejemplo, normalidad) ) . Sin embargo, esto sigue siendo una práctica estándar en muchas aplicaciones y, por lo general, no parece ser notado o discutido en los documentos aplicados. Mirando a través de la literatura, no pude encontrar un artículo que realmente discute este fenómeno.

Agradecería los enlaces a cualquier publicación relacionada con la elección de una prueba estadística basada en el resultado de otra prueba estadística, especialmente cualquiera que sea accesible para los científicos aplicados.

hypothesis-testing references p-value Rob Hall
fuente

Comentario no relacionado: en mi búsqueda, me topé con un artículo de RS Nickerson ' Prueba de significación de hipótesis nulas: una revisión de una vieja y continua controversia ', que no analiza este fenómeno en particular, pero que también parecía agradable dar a los científicos aplicados.

Rob Hall

Hace mucho tiempo publiqué un análisis detallado de una de esas situaciones en quantdec.com/envstats/notes/class_12/ucl.htm : estudia las propiedades de una UCL que se determina mediante un procedimiento elegido condicional a los resultados de una prueba preliminar de hipótesis ( sobre la distribución subyacente).

whuber

Este podría interesarle (también vea esto ). Luego está esto . Eso se relaciona con la prueba de igualdad de varianza y prueba de normalidad respectivamente antes de una prueba t de dos muestras.

Glen_b -Reinstala Monica el

Me parece que decir simplemente que "es bien sabido que es problemático" es proporcionar una especificidad insuficiente porque la naturaleza problemática probablemente depende del marco estadístico dentro del cual se está trabajando. Los problemas para la interpretación frecuentista pueden no ser problemas para los métodos que evalúan el significado probatorio de los datos.

Michael Lew

Tal vez un simple ejemplo en el que esto sea problemático sirva para el mismo propósito que una cita.

BKay

Respuestas:

Creo que el siguiente documento de investigación sobre los procedimientos de la cadena es relevante y podría ser útil para responder a su pregunta: http://www.multxpert.com/doc/md2011.pdf .

Aleksandr Blekh
fuente

Gracias por el interesante artículo. Si lo entiendo correctamente, analiza la asignación de alfa basada en datos a un conjunto ordenado de hipótesis. Tal procedimiento podría simplemente agregar todas las variantes de una hipótesis a una lista (por ejemplo, la hipótesis dada que se puede usar una prueba paremétrica y la hipótesis dada de que hay alguna evidencia de que se debe usar una prueba no paremétrica). Si bien este debería ser un enfoque sensato en un marco de Neyman-Pearson, no estoy seguro de que esto resuelva el problema de interpretar los valores p en el sentido de Fisher.

Rob Hall

@RobHall: ¡De nada! Francamente, hojeé el periódico sin profundizar en los detalles, por lo que en este momento no puedo hacer un comentario que valga la pena. Pero espero revisar este artículo cuando tenga la oportunidad. Por cierto, aquí hay otro artículo interesante que podría ser relevante para esto, donde el autor argumenta que los dos marcos pueden considerarse complementarios: stat.duke.edu/courses/Spring07/sta215/Ref/Lehm1993.pdf .

Aleksandr Blekh