Articulo de referencia

Transformación de energía

En estadística , una transformación de potencia es una familia de funciones que se aplican para crear una transformación monótona de los datos mediante funciones de potencia . E...

En estadística , una transformación de potencia es una familia de funciones que se aplican para crear una transformación monótona de los datos mediante funciones de potencia . Es una técnica de transformación de datos que se utiliza para estabilizar la varianza , hacer que los datos se asemejen más a una distribución normal , mejorar la validez de las medidas de asociación (como la correlación de Pearson entre variables) y para otros procedimientos de estabilización de datos.

Las transformaciones de potencia se utilizan en múltiples campos, incluyendo el análisis de multirresolución y ondículas , [ 1 ] análisis de datos estadísticos, investigación médica, modelado de procesos físicos, [ 2 ] análisis de datos geoquímicos , [ 3 ] epidemiología [ 4 ] y muchas otras áreas de investigación clínica, ambiental y social.

Definición

La transformación de potencia se define como una función continua del parámetro de potencia λ , que normalmente se da en forma de partes que la hace continua en el punto de singularidad ( λ =  0  ). Para vectores de datos ( y1 , ..., yn ) en los que cada yi > 0, la transformación de potencia es   

yi(λ)={yiλ1λ(GM(y))λ1,si λ0GM(y)lnyi,si λ=0{\displaystyle y_{i}^{(\lambda )}={\begin{cases}{\dfrac {y_{i}^{\lambda }-1}{\lambda (\operatorname {GM} (y))^{\lambda -1}}},&{\text{si }}\lambda \neq 0\\[12pt]\operatorname {GM} (y)\ln {y_{i}},&{\text{si }}\lambda =0\end{cases}}}

dónde

GM(y)=(i=1norteyi)1norte=y1y2ynortenorte{\displaystyle \operatorname {GM} (y)=\left(\prod _{i=1}^{n}y_{i}\right)^{\frac {1}{n}}={\sqrt[{n}]{y_{1}y_{2}\cdots y_{n}}}\,}

es la media geométrica de las observaciones y 1 ,  ..., y n . El caso para λ=0{\displaystyle \lambda =0}es el límite comoλ{\displaystyle \lambda }se aproxima a 0. Para ver esto, observe queyiλ=exp(λln(yi))=1+λln(yi)+O((λln(yi))2){\displaystyle y_{i}^{\lambda }=\exp({\lambda \ln(y_{i})})=1+\lambda \ln(y_{i})+O((\lambda \ln(y_{i}))^{2})}- utilizando la serie de Taylor . Entoncesyiλ1λ=ln(yi)+O(λ){\displaystyle {\dfrac {y_{i}^{\lambda }-1}{\lambda }}=\ln(y_{i})+O(\lambda )}y todo menosln(yi){\displaystyle \ln(y_{i})}se vuelve insignificante paraλ{\displaystyle \lambda }suficientemente pequeño.

La inclusión de la potencia ( λ  − 1) de la media geométrica en el denominador simplifica la interpretación científica de cualquier ecuación que involucre yi(λ){\displaystyle y_{i}^{(\lambda )}}, porque las unidades de medida no cambian a medida que cambia λ .

Box y Cox (1964) introdujeron la media geométrica en esta transformación incluyendo primero el jacobiano de la transformación de potencia reescalada.

yλ1λ.{\displaystyle {\frac {y^{\lambda }-1}{\lambda }}.}

con la probabilidad. Este jacobiano es el siguiente:

J(λ;y1,,ynorte)=i=1norte|dyi(λ)/dy|=i=1norteyiλ1=GM(y)norte(λ1){\displaystyle J(\lambda ;y_{1},\ldots ,y_{n})=\prod _{i=1}^{n}|dy_{i}^{(\lambda )}/dy|=\prod _{i=1}^{n}y_{i}^{\lambda -1}=\operatorname {GM} (y)^{n(\lambda -1)}}

Esto permite escribir la función de verosimilitud logarítmica normal en su valor máximo de la siguiente manera:

registro(L(μ^,σ^))=(norte/2)(registro(2πσ^2)+1)+norte(λ1)registro(GM(y))=(norte/2)(registro(2πσ^2/GM(y)2(λ1))+1).{\displaystyle {\begin{aligned}\log({\mathcal {L}}({\hat {\mu }},{\hat {\sigma }}))&=(-n/2)(\log(2\pi {\hat {\sigma }}^{2})+1)+n(\lambda -1)\log(\operatorname {GM} (y))\\[5pt]&=(-n/2)(\log(2\pi {\hat {\sigma }}^{2}/\operatorname {GM} (y)^{2(\lambda -1)})+1).\end{aligned}}}

Desde aquí, absorbiendoGM(y)2(λ1){\displaystyle \operatorname {GM} (y)^{2(\lambda -1)}}en la expresión paraσ^2{\displaystyle {\sombrero {\sigma }}^{2}}produce una expresión que establece que minimizar la suma de los cuadrados de los residuos deyi(λ){\displaystyle y_{i}^{(\lambda )}}es equivalente a maximizar la suma de la probabilidad logarítmica normal de las desviaciones de(yλ1)/λ{\displaystyle (y^{\lambda }-1)/\lambda }y el logaritmo del jacobiano de la transformación.

El valor en Y = 1 para cualquier λ es 0, y la derivada con respecto a Y en ese punto es 1 para cualquier λ . A veces, Y es una versión de alguna otra variable escalada para dar Y = 1 en algún tipo de valor promedio.

La transformación es una transformación de potencia , pero realizada de tal manera que se vuelve continua con el parámetro λ en λ = 0. Ha demostrado ser popular en el análisis de regresión , incluyendo la econometría .

Box y Cox también propusieron una forma más general de la transformación que incorpora un parámetro de desplazamiento.

τ(yi;λ,α)={(yi+α)λ1λ(GM(y+α))λ1si λ0,GM(y+α)ln(yi+α)si λ=0,{\displaystyle \tau (y_{i};\lambda ,\alpha )={\begin{cases}{\dfrac {(y_{i}+\alpha )^{\lambda }-1}{\lambda (\operatorname {GM} (y+\alpha ))^{\lambda -1}}}&{\text{si }}\lambda \neq 0,\\\\\operatorname {GM} (y+\alpha )\ln(y_{i}+\alpha )&{\text{si }}\lambda =0,\end{cases}}}

lo cual se cumple si y i  +  α > 0 para todo i . Si τ( Y , λ, α) sigue una distribución normal truncada , entonces se dice que Y sigue una distribución de Box-Cox . 

Bickel y Doksum eliminaron la necesidad de utilizar una distribución truncada al extender el rango de la transformación a todos los valores de y , de la siguiente manera:

τ(yi;λ,α)={sgn(yi+α)|yi+α|λ1λ(GM(y+α))λ1si λ0,GM(y+α)sgn(y+α)ln(yi+α)si λ=0,{\displaystyle \tau (y_{i};\lambda ,\alpha )={\begin{cases}{\dfrac {\operatorname {sgn} (y_{i}+\alpha )|y_{i}+\alpha |^{\lambda }-1}{\lambda (\operatorname {GM} (y+\alpha ))^{\lambda -1}}}&{\text{if }}\lambda \neq 0,\\\\\operatorname {GM} (y+\alpha )\operatorname {sgn} (y+\alpha )\ln(y_{i}+\alpha )&{\text{if }}\lambda =0,\end{cases}}}

donde sgn(.) es la función signo . Este cambio en la definición tiene poca importancia práctica siempre queα{\displaystyle \alpha }es menor quemin(yi){\displaystyle \operatorname {min} (y_{i})}, que suele ser así. [ 5 ]

Bickel y Doksum también demostraron que las estimaciones de los parámetros son consistentes y asintóticamente normales bajo condiciones de regularidad apropiadas, aunque la cota inferior estándar de Cramér-Rao puede subestimar sustancialmente la varianza cuando los valores de los parámetros son pequeños en relación con la varianza del ruido. [ 5 ] Sin embargo, este problema de subestimación de la varianza puede no ser un problema sustancial en muchas aplicaciones. [ 6 ] [ 7 ]

Transformación de Box-Cox

Las transformaciones Box-Cox de un parámetro se definen como

yi(λ)={yiλ1λsi λ0,lnyisi λ=0,{\displaystyle y_{i}^{(\lambda )}={\begin{cases}{\dfrac {y_{i}^{\lambda }-1}{\lambda }}&{\text{si }}\lambda \neq 0,\\\ln y_{i}&{\text{si }}\lambda =0,\end{cases}}}

y las transformaciones de Box-Cox de dos parámetros como

yi(λ)={(yi+λ2)λ11λ1si λ10,ln(yi+λ2)si λ1=0,{\displaystyle y_{i}^{({\boldsymbol {\lambda }})}={\begin{cases}{\dfrac {(y_{i}+\lambda _{2})^{\lambda _{1}}-1}{\lambda _{1}}}&{\text{si }}\lambda _{1}\neq 0,\\\ln(y_{i}+\lambda _{2})&{\text{si }}\lambda _{1}=0,\end{cases}}}

como se describe en el artículo original. [ 8 ] [ 9 ] Además, las primeras transformaciones se cumplen parayi>0{\displaystyle y_{i}>0}y el segundo parayi>λ2{\displaystyle y_{i}>-\lambda _{2}}. [ 8 ]

El parámetroλ{\displaystyle \lambda }se estima utilizando la función de verosimilitud de perfil y mediante pruebas de bondad de ajuste. [ 10 ]

Intervalo de confianza

El intervalo de confianza para la transformación de Box-Cox se puede construir asintóticamente utilizando el teorema de Wilks sobre la función de verosimilitud de perfil para encontrar todos los valores posibles deλ{\displaystyle \lambda }que cumplan la siguiente restricción: [ 11 ]

ln(L(λ))ln(L(λ^))12χ21,1α.{\displaystyle \ln {\big (}L(\lambda ){\big )}\geq \ln {\big (}L({\hat {\lambda }}){\big )}-{\frac {1}{2}}{\chi ^{2}}_{1,1-\alpha }.}

Ejemplo

El conjunto de datos hepáticos de BUPA [ 12 ] contiene datos sobre las enzimas hepáticas ALT y γGT . Supongamos que nos interesa usar log(γGT) para predecir ALT. En el panel (a) de la figura se muestra un gráfico de los datos. Parece haber una varianza no constante, y una transformación de Box-Cox podría ser útil.

La log-verosimilitud del parámetro de potencia aparece en el panel (b). La línea de referencia horizontal se encuentra a una distancia de χ 1 2 /2 del máximo y puede utilizarse para obtener un intervalo de confianza aproximado del 95% para λ. Parece que un valor cercano a cero sería adecuado, por lo que tomamos logaritmos.

Posiblemente, la transformación podría mejorarse añadiendo un parámetro de desplazamiento a la transformación logarítmica. El panel (c) de la figura muestra la log-verosimilitud. En este caso, el máximo de la verosimilitud es cercano a cero, lo que sugiere que no se necesita un parámetro de desplazamiento. El último panel muestra los datos transformados con una línea de regresión superpuesta.

Cabe señalar que, si bien las transformaciones de Box-Cox pueden mejorar significativamente el ajuste del modelo, existen algunos problemas que no pueden resolverse con esta transformación. En el ejemplo actual, los datos presentan una distribución de cola pesada, por lo que la suposición de normalidad no es realista y un enfoque de regresión robusta conduce a un modelo más preciso.

Aplicación econométrica

Los economistas suelen caracterizar las relaciones de producción mediante alguna variante de la transformación de Box-Cox. [ 13 ]

Consideremos una representación común de la producción Q como dependiente de los servicios proporcionados por un stock de capital K y por las horas de trabajo N :

τ(Q)=ατ(K)+(1α)τ(norte).{\displaystyle \tau (Q)=\alpha \tau (K)+(1-\alpha )\tau (N).\,}

Resolviendo para Q invirtiendo la transformación de Box-Cox encontramos

Q=(αKλ+(1α)norteλ)1/λ,{\displaystyle Q={\big (}\alpha K^{\lambda }+(1-\alpha )N^{\lambda }{\big )}^{1/\lambda },\,}

que se conoce como la función de producción de elasticidad de sustitución constante (CES) .

La función de producción CES es una función homogénea de grado uno.

Cuando λ = 1, esto produce la función de producción lineal:

Q=αK+(1α)norte.{\displaystyle Q=\alpha K+(1-\alpha )N.\,}

Cuando λ → 0, se obtiene la famosa función de producción Cobb-Douglas :

Q=Kαnorte1α.{\displaystyle Q=K^{\alpha }N^{1-\alpha }.\,}

Actividades y demostraciones

Las páginas de recursos de SOCR contienen varias actividades interactivas prácticas [ 14 ] que demuestran la transformación de Box-Cox (potencia) mediante applets y gráficos de Java. Estas ilustran directamente los efectos de esta transformación en gráficos Q-Q , diagramas de dispersión X-Y , gráficos de series temporales e histogramas .

Transformación de Yeo-Johnson

La transformación de Yeo-Johnson [ 15 ] también permite valores cero y negativos dey{\displaystyle y}. λ{\displaystyle \lambda }puede ser cualquier número real, dondeλ=1{\displaystyle \lambda =1}produce la transformación de la identidad. La ley de transformación dice:

yi(λ)={((yi+1)λ1)/λsi λ0,y0ln(yi+1)si λ=0,y0((yi+1)(2λ)1)/(2λ)si λ2,y<0ln(yi+1)si λ=2,y<0{\displaystyle y_{i}^{(\lambda )}={\begin{cases}((y_{i}+1)^{\lambda }-1)/\lambda &{\text{if }}\lambda \neq 0,y\geq 0\\[4pt]\ln(y_{i}+1)&{\text{if }}\lambda =0,y\geq 0\\[4pt]-((-y_{i}+1)^{(2-\lambda )}-1)/(2-\lambda )&{\text{if }}\lambda \neq 2,y<0\\[4pt]-\ln(-y_{i}+1)&{\text{if }}\lambda =2,y<0\end{cases}}}

Transformación de Box-Tidwell

La transformación de Box-Tidwell es una técnica estadística que se utiliza para evaluar y corregir la no linealidad entre las variables predictoras y el logit en un modelo lineal generalizado , especialmente en la regresión logística . Esta transformación resulta útil cuando la relación entre las variables independientes y la variable de respuesta no es lineal y no puede ser capturada adecuadamente por el modelo estándar.

Descripción general

La transformación de Box-Tidwell fue desarrollada por George E. P. Box y Paul W. Tidwell en 1962 como una extensión de las transformaciones de Box-Cox , que se aplican a la variable dependiente. Sin embargo, a diferencia de la transformación de Box-Cox, la transformación de Box-Tidwell se aplica a las variables independientes en los modelos de regresión. Se utiliza con frecuencia cuando no se cumple el supuesto de linealidad entre las variables predictoras y la variable de respuesta.

Método

La idea general detrás de la transformación de Box-Tidwell es aplicar una transformación de potencia a cada variable independiente Xi en el modelo de regresión:

incógnitai=incógnitaiλ{\displaystyle X_{i}'=X_{i}^{\lambda }}

Dóndeλ{\displaystyle \lambda }es el parámetro estimado a partir de los datos. Si la transformación de Box-Tidwell es significativamente diferente de 1, esto indica una relación no lineal entre Xi y el logit, y la transformación mejora el ajuste del modelo.

La prueba de Box-Tidwell se realiza típicamente aumentando el modelo de regresión con términos comoincógnitairegistro(incógnitai){\displaystyle X_{i}\log(X_{i})}y comprobando la significancia de los coeficientes. Si son significativos, esto sugiere que se debe aplicar una transformación para lograr una relación lineal entre el predictor y el logit.

Aplicaciones

Estabilización de predictores continuos

Esta transformación resulta beneficiosa en modelos de regresión logística o de riesgos proporcionales , donde la no linealidad de los predictores continuos puede distorsionar la relación con la variable dependiente. Se trata de una herramienta flexible que permite al investigador ajustar un modelo más apropiado a los datos sin tener que adivinar de antemano la forma funcional de la relación.

Verificación de la linealidad en la regresión logística

En la regresión logística , un supuesto clave es que las variables independientes continuas presenten una relación lineal con el logit de la variable dependiente. El incumplimiento de este supuesto puede generar estimaciones sesgadas y un rendimiento reducido del modelo. La transformación de Box-Tidwell es un método utilizado para evaluar y corregir dichas violaciones, determinando si un predictor continuo requiere una transformación para lograr la linealidad con el logit.

Método para verificar la linealidad

La transformación de Box-Tidwell introduce un término de interacción entre cada variable continua X i y su logaritmo natural.registro(incógnitai){\displaystyle \log(X_{i})}:

incógnitairegistro(incógnitai){\displaystyle X_{i}\log(X_{i})}

Este término se incluye en el modelo de regresión logística para comprobar si la relación entre X i y el logit es no lineal. Un coeficiente estadísticamente significativo para este término de interacción indica una violación del supuesto de linealidad, lo que sugiere la necesidad de transformar la variable predictora. La transformación de Box-Tidwell proporciona una transformación de potencia adecuada para linealizar la relación, mejorando así la precisión y la validez del modelo. Por el contrario, los resultados no significativos respaldan el supuesto de linealidad.

Limitaciones

Una limitación de la transformación de Box-Tidwell es que solo funciona con valores positivos de las variables independientes. Si sus datos contienen valores negativos, la transformación no se puede aplicar directamente sin modificar las variables (por ejemplo, añadiendo una constante).

La transformación de potencia aparece con diferentes nombres en diversos contextos científicos y aplicados:

  • Equidad alfa : introducida en el estudio de la maximización de la utilidad de la red por Frank Kelly y colaboradores como la familia de funciones de utilidad α-justas. [ 16 ] [ 17 ]
  • Familia q-exponencial : una generalización de la familia exponencial estándar que reemplaza la función exponencial con la forma q-exponencial derivada de la estadística de Tsallis. [ 18 ]

Notas

  1. Gao, Peisheng; Wu, Weilin (2006). "Clasificación de perturbaciones de la calidad de la energía mediante ondículas y máquinas de vectores de soporte". Sexta Conferencia Internacional sobre Diseño y Aplicaciones de Sistemas Inteligentes . ISDA '06. Vol.  1. Washington, DC, EE. UU.: IEEE Computer Society. pp. 201–206 . doi : 10.1109/ISDA.2006.217 . ISBN  9780769525280. S2CID 2444503 . 
  2. Gluzman, S.; Yukalov, VI (2006-01-01). "Transformaciones de potencia autosimilares en problemas de extrapolación". Journal of Mathematical Chemistry . 39 (1): 47– 56. arXiv : cond-mat/0606104 . Bibcode : 2006cond.mat..6104G . doi : 10.1007/s10910-005-9003-7 . ISSN 1572-8897 . S2CID 118965098 .  
  3. Howarth, RJ; Earle, SAM (1979-02-01). "Aplicación de una transformación de potencia generalizada a datos geoquímicos". Journal of the International Association for Mathematical Geology . 11 (1): 45– 62. doi : 10.1007/BF01043245 . ISSN 1573-8868 . S2CID 121582755 .  
  4. Peters, JL; Rushton, L.; Sutton, AJ; Jones, DR; Abrams, KR; Mugglestone, MA (2005). "Métodos bayesianos para la síntesis de diseño cruzado de evidencia epidemiológica y toxicológica". Journal of the Royal Statistical Society, Serie C. 54 : 159–172 . doi : 10.1111 /j.1467-9876.2005.00476.x . S2CID 121909404 . 
  5. 1 2 Bickel, Peter J. ; Doksum, Kjell A. (junio de 1981). "An analysis of transformations revisited". Journal of the American Statistical Association . 76 (374): 296– 311. doi : 10.1080/01621459.1981.10477649 .
  6. Sakia, RM (1992), "La técnica de transformación de Box-Cox: una revisión", The Statistician , 41 (2): 169–178 , CiteSeerX 10.1.1.469.7176 , doi : 10.2307/2348250 , JSTOR 2348250  
  7. Li, Fengfei (11 de abril de 2005), Transformaciones de Box-Cox: una visión general (PDF) (presentación de diapositivas), São Paulo, Brasil: Universidad de São Paulo, Brasil , consultado el 2 de noviembre de 2014.
  8. 1 2 Box, George EP ; Cox, DR (1964). "An analysis of transformations". Journal of the Royal Statistical Society, Series B . 26 (2): 211– 252. JSTOR 2984418 . MR 0192611 .  
  9. Johnston, J. (1984). Métodos econométricos (Tercera ed.). Nueva York: McGraw-Hill. págs. 61–74 . ISBN   978-0-07-032685-9.
  10. Asar, O.; Ilk, O.; Dag, O. (2017). "Estimación del parámetro de transformación de potencia de Box-Cox mediante pruebas de bondad de ajuste". Communications in Statistics - Simulation and Computation . 46 (1): 91– 105. arXiv : 1401.3812 . doi : 10.1080/03610918.2014.957839 . S2CID 41501327 . 
  11. Abramovich, Felix; Ritov, Ya'acov (2013). Teoría estadística: una introducción concisa . CRC Press. págs. 121–122 . ISBN  978-1-4398-5184-5.
  12. Conjunto de datos de trastornos hepáticos de BUPA
  13. Zarembka, P. (1974). «Transformación de variables en econometría». Fronteras en econometría . Nueva York: Academic Press. pp. 81–104 . ISBN  0-12-776150-0.
  14. Gráficos de la familia de transformadas de potencia , páginas web de SOCR
  15. Yeo, In-Kwon; Johnson, Richard A. (2000). "Una nueva familia de transformaciones de potencia para mejorar la normalidad o la simetría". Biometrika . 87 (4): 954– 959. doi : 10.1093/biomet/87.4.954 . JSTOR 2673623 . 
  16. Kelly, FP; Maulloo, AK; Tan, DKH (1998). "Control de tarifas para redes de comunicación: precios sombra, equidad proporcional y estabilidad". Journal of the Operational Research Society . 49 (3): 237– 252. doi : 10.1057/palgrave.jors.2600523 .
  17. Pereira, CF; Menasché, DS; Zaverucha, G.; Paes, A.; Barbosa, VC (2025). "Un enfoque orientado a la utilidad para el aprendizaje por transferencia basado en instancias para dominios relacionales". Machine Learning . 114 (11): 261. doi : 10.1007/s10994-025-06864-4 .
  18. Zhu, Lingwei; Shah, Haseeb; Wang, Han; Nagai, Yukie; White, Martha (2025). Familia q-exponencial para la optimización de políticas . Actas de la Conferencia Internacional sobre Representaciones de Aprendizaje (ICLR).

Referencias

  • Box, George EP ; Cox, DR (1964). " Análisis de transformaciones". Journal of the Royal Statistical Society, Serie B. 26 ( 2): 211– 252. JSTOR 2984418. MR 0192611 .  
  • Carroll, RJ; Ruppert, D. (1981). "Sobre la predicción y la familia de transformaciones de potencia" (PDF) . Biometrika . 68 (3): 609– 615. doi : 10.1093/biomet/68.3.609 .
  • DeGroot, MH (1987). "Una conversación con George Box" (PDF) . Statistical Science . 2 (3): 239– 258. doi : 10.1214/ss/1177013223 .
  • Handelsman, DJ (2002). "Transformaciones de potencia óptimas para el análisis de la concentración de espermatozoides y otras variables del semen". Journal of Andrology . 23 (5).
  • Gluzman, S.; Yukalov, VI (2006). "Transformaciones de potencia autosimilares en problemas de extrapolación". Journal of Mathematical Chemistry . 39 (1): 47– 56. arXiv : cond-mat/0606104 . Bibcode : 2006cond.mat..6104G . doi : 10.1007/s10910-005-9003-7 . S2CID 118965098 . 
  • Howarth, RJ; Earle, SAM (1979). "Aplicación de una transformación de potencia generalizada a datos geoquímicos". Journal of the International Association for Mathematical Geology . 11 (1): 45– 62. doi : 10.1007/BF01043245 . S2CID 121582755 . 
  • Box, GEP y Tidwell, PW (1962) Transformación de variables independientes. Technometrics, 4, 531-550. https://doi.org/10.1080/00401706.1962.10490038 (también conocida como transformación de Box-Tidwell)