¿Son independientes las estimaciones de la intersección y la pendiente en la regresión lineal simple?

9

Considere un modelo lineal

yyo=α+βXyo+ϵyo

y estimaciones de la pendiente y la intersección α y ß utilizando mínimos cuadrados ordinarios. Esta referencia durante la estadística matemática hace la declaración de que α y β son independientes (en su prueba de su teorema).α^β^α^β^

No estoy seguro de entender por qué. Ya que

α^=y¯-β^X¯

¿No significa esto α y β se correlacionan? Probablemente me estoy perdiendo algo realmente obvio aquí.α^β^

WetlabEstudiante
fuente

Respuestas:

12

Vaya al mismo sitio en la siguiente subpágina:

https://onlinecourses.science.psu.edu/stat414/node/278

Verá más claramente que especifican el modelo de regresión lineal simple con el regresor centrado en su media muestral . Y esto explica por qué posteriormente dicen que α y β son independientes. α^β^

Para el caso en que los coeficientes se estiman con un regresor que no está centrado, su covarianza es

Cov(α^,β^)=-σ2(X¯/ /SXX),SXX=(Xyo2-X¯2)

Así que ya ves que si utilizamos un regresor centra en , llamarlo ~ x , la expresión de covarianza anteriormente, se utilizará la media muestral de la variable independiente centrada, ~ ˉ x , que será igual a cero, por lo que, también, será cero, y los estimadores de coeficientes serán independientes.X¯X~X¯~

Esta publicación contiene más sobre álgebra OLS de regresión lineal simple.

Alecos Papadopoulos
fuente
Me gustaría considerar el uso de en lugar de C o V ( α , β ) . De lo contrario, se siente que ˉ x y S x x necesitan ser reemplazados por contrapartes de la población. ¿O estoy equivocado? Cov(α^,β^El |X)Cov(α^,β^)X¯SXX
Richard Hardy