¿Qué significa "lineal en parámetros"?

13

El modelo de regresión lineal es lineal en parámetros.

¿Qué significa esto realmente?

Albert Gao
fuente
1
Más referencia, si es posible? ¿Algo encima o debajo de esa línea (del texto que encontraste esto)?
Dawny33
Esto parece, y es difícil de distinguir por la falta de contexto, una pregunta de estadísticas, y probablemente debería estar en una forma expandida en el sitio de intercambio de estadísticas de pila.
Spacedman

Respuestas:

12

Considere una ecuación de la forma

y=β0+β1x1+β2x2+ϵ

donde 's son las variables y β ' s son los parámetros. Aquí, y es una función lineal de β 's (lineal en parámetros) y también una función lineal de x ' s (lineal en variables). Si cambia la ecuación axββx

y=β0+β1x1+β2x12+ϵ

Entonces, ya no es lineal en las variables (debido al término al cuadrado) pero sigue siendo lineal en los parámetros. Y para la regresión lineal (múltiple), eso es todo lo que importa porque al final, está tratando de encontrar un conjunto de que minimice una función de pérdida. Para eso, necesitas resolver un sistema de ecuaciones lineales . Dadas sus bonitas propiedades, tiene una solución de forma cerrada que nos facilita la vida. Las cosas se ponen más difíciles cuando manejas ecuaciones no lineales.β

Supongamos que no se trata de un modelo de regresión, sino que tiene un problema de programación matemática: Usted está tratando de minimizar una función objetivo de la forma sujeta a un conjunto de restricciones: A x b y x 0 . Este es un problema de programación lineal en el sentido de que es lineal en las variables. A diferencia del modelo de regresión, está tratando de encontrar un conjunto de x (variables) que satisfaga las restricciones y minimice la función objetivo. Esto también requerirá que resuelva sistemas de ecuaciones lineales, pero aquí será lineal en variables. Sus parámetros no tendrán ningún efecto en ese sistema de ecuaciones lineales.cTxAxbx0x

ayhan
fuente
5

Y=AXAXX=[ααββ2]TYX

Emre
fuente
1
¡Gracias! En su contexto, ¿no considera regularmente X como la variable y A como el parámetro?
Albert Gao
2
¿Estás seguro de que X son los parámetros? Yo diría que la matriz A son los parámetros. . .
Neil Slater
XA
2

Un modelo es lineal cuando cada término es una constante o el producto de un parámetro y un predictor. Una ecuación lineal se construye sumando los resultados para cada término. Esto limita la ecuación a una sola forma básica:

Response=constant+parameterpredictor+...+parameterpredictor

"Lineal en parámetros" en Regresión lineal, significa que ningún parámetro aparece como exponente, ni multiplicado ni dividido por otro parámetro.

Parag Jyoti Dutta
fuente