Quiero comprender mejor los paquetes R Larsy Glmnet, que se utilizan para resolver el problema de Lasso: (para Variables y muestras, ver www.stanford.edu/~hastie/Papers/glmnet.pdf en la página 3)m i n( β0 0β) ∈ Rp + 1[ 12 N∑i = 1norte( yyo- β0 0- xTyoβ)2+ λ | El | βEl | El |l1]metroyonorte(β0...
Me gustaría ajustar un modelo lineal (lm) donde la varianza de los residuos depende claramente de la variable explicativa. La forma en que sé hacer esto es usando glm con la familia Gamma para modelar la varianza, y luego poner su inverso en los pesos en la función lm (ejemplo:...
La segunda pregunta es que encontré en una discusión en alguna parte de la web hablando sobre "agrupación supervisada", que yo sepa, la agrupación no está supervisada, entonces, ¿cuál es exactamente el significado de "agrupación supervisada"? ¿Cuál es la diferencia con respecto a la...
Sé E(aX+b)=aE(X)+bE(aX+b)=aE(X)+bE(aX+b) = aE(X)+b con a,ba,ba,b constantes, por lo que dada E(X)E(X)E(X) , es fácil de resolver. También sé que no puede aplicar eso cuando es una función no lineal, como en este caso E(1/X)≠1/E(X)E(1/X)≠1/E(X)E(1/X) \neq 1/E(X) , y para resolver eso, tengo que...
Soy un ingeniero de software que busca construir una herramienta de prueba A / B. No tengo antecedentes sólidos de estadísticas, pero he estado leyendo bastante en los últimos días. Estoy siguiendo la metodología descrita aquí y resumiré los puntos relevantes a continuación. La herramienta...
Además de algunas circunstancias únicas en las que debemos comprender absolutamente la relación media condicional, ¿cuáles son las situaciones en las que un investigador debería elegir OLS en lugar de la Regresión Cuantil? No quiero que la respuesta sea "si no sirve de nada entender las relaciones...
He estado queriendo experimentar con una red neuronal para un problema de clasificación que estoy enfrentando. Me encontré con documentos que hablan de RBM. Pero por lo que puedo entender, no son diferentes de tener una red neuronal multicapa. ¿Es esto exacto? Además, trabajo con R y no veo ningún...
Suponga que una variable aleatoria tiene un límite inferior y superior [0,1]. ¿Cómo calcular la varianza de tal
Para la varianza no ponderada Var(X):=1n∑i(xi−μ)2Var(X):=1n∑i(xi−μ)2\text{Var}(X):=\frac{1}{n}\sum_i(x_i - \mu)^2 existe la varianza muestral corregida por sesgo, cuando la media se estimó a partir de los mismos
Cuando trabajamos con muchas variables de entrada, a menudo nos preocupa la multicolinealidad . Existen varias medidas de multicolinealidad que se utilizan para detectar, pensar y / o comunicar multicolinealidad. Algunas recomendaciones comunes son: El múltiple R2jRj2R^2_j para una variable...
El paquete randomForest de R no puede manejar factores con más de 32 niveles. Cuando se le dan más de 32 niveles, emite un mensaje de error: No puede manejar predictores categóricos con más de 32 categorías. Pero los datos que tengo tienen varios factores. Algunos de ellos tienen más de 1000...
¿Es el aprendizaje automático un tema importante para que cualquier estadístico se familiarice? Parece que el aprendizaje automático es estadística. ¿Por qué los programas de estadística (pregrado y posgrado) no requieren aprendizaje
Yo entiendo que la prueba de Wald para los coeficientes de regresión se basa en la propiedad después de que mantiene asintóticamente (por ejemplo Wasserman (2006): Todos Estadística , páginas 153, 214-215): Dondeβdenota el coeficiente de regresión estimado,^SE(β)denota el error estándar del...
Actualmente estoy pasando por "Razonamiento Bayesiano y Aprendizaje Automático" de David Barber y es un libro extremadamente bien escrito y atractivo para aprender los fundamentos. Entonces, una pregunta para alguien que ya ha hecho esto. ¿Cuáles son los siguientes libros que debería revisar...
Tengo un conjunto de datos que son estadísticas de un foro de discusión web. Estoy viendo la distribución de la cantidad de respuestas que se espera que tenga un tema. En particular, he creado un conjunto de datos que tiene una lista de conteos de respuestas de temas, y luego el conteo de temas que...
Por lo poco que sé, el algoritmo EM se puede usar para encontrar la probabilidad máxima cuando se establece en cero las derivadas parciales con respecto a los parámetros de la probabilidad, da un conjunto de ecuaciones que no se pueden resolver analíticamente. Pero, ¿es necesario el algoritmo EM en...
He estado buscando en el paquete de arranque en R y aunque he encontrado una serie de buenos manuales sobre cómo usarlo, todavía no he encontrado nada que describa exactamente lo que está sucediendo "detrás de escena". Por ejemplo, en este ejemplo , la guía muestra cómo usar los coeficientes de...
En este comentario , Nick Cox escribió: Binning en clases es un método antiguo. Si bien los histogramas pueden ser útiles, el software estadístico moderno facilita y aconseja ajustar las distribuciones a los datos sin procesar. Binning simplemente arroja detalles que son cruciales para...
Estoy realizando pruebas estadísticas independientes con la misma hipótesis nula, y me gustaría combinar los resultados en un valor . Parece que hay dos métodos "aceptados": el método de Fisher y el método de Stouffer .pnortenorteNpagspagsp Mi pregunta es sobre el método de Stouffer. Para cada...
Tengo una pregunta sobre el análisis de conglomerados. Hay 3000 empresas, que deben agruparse de acuerdo con su consumo de energía durante 5 años. Cada empresa tiene valores por cada hora durante 5 años. Me gustaría saber si algunas empresas tienen el mismo patrón en el poder de uso durante el...