Articulo de referencia

Distribución chi-cuadrado inversa escalada

\\nu > 0\\, \\tau^2 > 0\\, "},"support":{"wt":" x \\in (0, \\infty) "},"pdf":{"wt":" \\frac{(\\tau^2\\nu/2)^{\\nu/2}}{\\Gamma(\\nu/2)}~\n\\frac{\\exp\\left[ \\frac{-\\nu \\tau^2...

La distribución chi-cuadrado inversa escaladaψinv-χ2(ν){\displaystyle \psi \,{\mbox{inv-}}\chi ^{2}(\nu )}, dóndeψ{\displaystyle \psi }es el parámetro de escala, igual a la distribución inversa de Wishart univariadaW1(ψ,ν){\displaystyle {\mathcal {W}}^{-1}(\psi,\nu)}con grados de libertadν{\displaystyle \nu }.

Esta familia de distribuciones chi-cuadrado inversas escaladas está vinculada a la distribución chi-cuadrado inversa y a la distribución chi-cuadrado :

Siincógnitaψinv-χ2(ν){\displaystyle X\sim \psi \,{\mbox{inv-}}\chi ^{2}(\nu )}entoncesincógnita/ψinv-χ2(ν){\displaystyle X/\psi \sim {\mbox{inv-}}\chi ^{2}(\nu )}así comoψ/incógnitaχ2(ν){\displaystyle \psi /X\sim \chi ^{2}(\nu )}y1/incógnitaψ1χ2(ν){\displaystyle 1/X\sim \psi ^{-1}\chi ^{2}(\nu )}.

En lugar deψ{\displaystyle \psi }Sin embargo, la distribución chi-cuadrado inversa escalada se parametriza con mayor frecuencia mediante el parámetro de escala.τ2=ψ/ν{\displaystyle \tau ^{2}=\psi /\nu }y la distribuciónντ2inv-χ2(ν){\displaystyle \nu \tau ^{2}\,{\mbox{inv-}}\chi ^{2}(\nu )}se denota porEscala-inv-χ2(ν,τ2){\displaystyle {\mbox{Escala-inv-}}\chi ^{2}(\nu ,\tau ^{2})}.

En términos deτ2{\displaystyle \tau ^{2}}Las relaciones anteriores se pueden escribir de la siguiente manera:

SiincógnitaEscala-inv-χ2(ν,τ2){\displaystyle X\sim {\mbox{Escala-inv-}}\chi ^{2}(\nu ,\tau ^{2})}entoncesincógnitaντ2inv-χ2(ν){\displaystyle {\frac {X}{\nu \tau ^{2}}}\sim {\mbox{inv-}}\chi ^{2}(\nu )}así comoντ2incógnitaχ2(ν){\displaystyle {\frac {\nu \tau ^{2}}{X}}\sim \chi ^{2}(\nu )}y1/incógnita1ντ2χ2(ν){\displaystyle 1/X\sim {\frac {1}{\nu \tau ^{2}}}\chi ^{2}(\nu )}.

Esta familia de distribuciones chi-cuadrado inversas escaladas es una reparametrización de la distribución gamma inversa .

Específicamente, si

incógnitaψinv-χ2(ν)=Escala-inv-χ2(ν,τ2){\displaystyle X\sim \psi \,{\mbox{inv-}}\chi ^{2}(\nu )={\mbox{Escala-inv-}}\chi ^{2}(\nu ,\tau ^{2})}  entonces  incógnitaInv-Gamma(ν2,ψ2)=Inv-Gamma(ν2,ντ22){\displaystyle X\sim {\textrm {Inv-Gamma}}\left({\frac {\nu }{2}},{\frac {\psi }{2}}\right)={\textrm {Inv-Gamma}}\left({\frac {\nu }{2}},{\frac {\nu \tau ^{2}}{2}}\right)}

Cualquiera de las dos formas puede utilizarse para representar la distribución de entropía máxima para un primer momento inverso fijo.(mi(1/incógnita)){\displaystyle (E(1/X))}y primer momento logarítmico(mi(ln(incógnita)){\displaystyle (E(\ln(X))}.

La distribución chi-cuadrado inversa escalada también tiene una utilidad particular en la estadística bayesiana . Específicamente, la distribución chi-cuadrado inversa escalada puede utilizarse como una distribución a priori conjugada para el parámetro de varianza de una distribución normal . La misma distribución a priori, en una parametrización alternativa, viene dada por la distribución gamma inversa .

Caracterización

La función de densidad de probabilidad de la distribución chi-cuadrado inversa escalada se extiende sobre el dominioincógnita>0{\displaystyle x>0}y es

F(incógnita;ν,τ2)=(τ2ν/2)ν/2Γ(ν/2) exp[ντ22incógnita]incógnita1+ν/2{\displaystyle f(x;\nu ,\tau ^{2})={\frac {(\tau ^{2}\nu /2)^{\nu /2}}{\Gamma (\nu /2)}}~{\frac {\exp \left[{\frac {-\nu \tau ^{2}}{2x}}\right]}{x^{1+\nu /2}}}}

dóndeν{\displaystyle \nu }es el parámetro de grados de libertad yτ2{\displaystyle \tau ^{2}}es el parámetro de escala . La función de distribución acumulativa es

F(incógnita;ν,τ2)=Γ(ν2,τ2ν2incógnita)/Γ(ν2){\displaystyle F(x;\nu ,\tau ^{2})=\Gamma \left({\frac {\nu }{2}},{\frac {\tau ^{2}\nu }{2x}}\right)\left/\Gamma \left({\frac {\nu }{2}}\right)\right.}
=Q(ν2,τ2ν2incógnita){\displaystyle =Q\left({\frac {\nu }{2}},{\frac {\tau ^{2}\nu }{2x}}\right)}

dóndeΓ(a,incógnita){\displaystyle \Gamma (a,x)}es la función gamma incompleta ,Γ(incógnita){\displaystyle \Gamma (x)} es la función gamma yQ(a,incógnita){\displaystyle Q(a,x)}es una función gamma regularizada . La función característica es

φ(t;ν,τ2)={\displaystyle \varphi (t;\nu ,\tau ^{2})=}
2Γ(ν2)(iτ2νt2)ν4Kν2(2iτ2νt),{\displaystyle {\frac {2}{\Gamma ({\frac {\nu }{2}})}}\left({\frac {-i\tau ^{2}\nu t}{2}}\right)^{\!\!{\frac {\nu }{4}}}\!\!K_{\frac {\nu }{2}}\left({\sqrt {-2i\tau ^{2}\nu t}}\right),}

dóndeKν2(z){\displaystyle K_{\frac {\nu }{2}}(z)}es la función de Bessel modificada de segundo tipo .

Estimación de parámetros

La estimación de máxima verosimilitud deτ2{\displaystyle \tau ^{2}}es

τ2=norte/i=1norte1incógnitai.{\displaystyle \tau ^{2}=n/\sum _{i=1}^{n}{\frac {1}{x_{i}}}.}

La estimación de máxima verosimilitud deν2{\displaystyle {\frac {\nu }{2}}}se puede encontrar utilizando el método de Newton en:

ln(ν2)ψ(ν2)=1nortei=1norteln(incógnitai)ln(τ2),{\displaystyle \ln \left({\frac {\nu }{2}}\right)-\psi \left({\frac {\nu }{2}}\right)={\frac {1}{n}}\sum _{i=1}^{n}\ln \left(x_{i}\right)-\ln \left(\tau ^{2}\right),}

dóndeψ(incógnita){\displaystyle \psi (x)}es la función digamma . Se puede obtener una estimación inicial tomando la fórmula de la media y resolviéndola paraν.{\displaystyle \nu .} Dejarincógnita¯=1nortei=1norteincógnitai{\displaystyle {\bar {x}}={\frac {1}{n}}\sum _{i=1}^{n}x_{i}}sea ​​la media de la muestra. Entonces, una estimación inicial paraν{\displaystyle \nu }está dado por:

ν2=incógnita¯incógnita¯τ2.{\displaystyle {\frac {\nu }{2}}={\frac {\bar {x}}{{\bar {x}}-\tau ^{2}}}.}

Estimación bayesiana de la varianza de una distribución normal

La distribución chi-cuadrado inversa escalada tiene una segunda aplicación importante: la estimación bayesiana de la varianza de una distribución normal.

Según el teorema de Bayes , la distribución de probabilidad posterior para las cantidades de interés es proporcional al producto de una distribución previa para las cantidades y una función de verosimilitud :

pag(σ2|D,I)pag(σ2|I)pag(D|σ2){\displaystyle p(\sigma ^{2}|D,I)\propto p(\sigma ^{2}|I)\;p(D|\sigma ^{2})}

donde D representa los datos e I representa cualquier información inicial sobre σ 2 que ya podamos tener.

El escenario más sencillo se da si la media μ ya se conoce; o, alternativamente, si se busca la distribución condicional de σ 2 para un valor supuesto particular de μ .

Entonces, el término de verosimilitud L ( σ 2 | D ) = p ( D | σ 2 ) tiene la forma familiar

L(σ2|D,μ)=1(2πσ)norteexp[inorte(incógnitaiμ)22σ2]{\displaystyle {\mathcal {L}}(\sigma ^{2}|D,\mu )={\frac {1}{\left({\sqrt {2\pi }}\sigma \right)^{n}}}\;\exp \left[-{\frac {\sum _{i}^{n}(x_{i}-\mu )^{2}}{2\sigma ^{2}}}\right]}

Al combinar esto con la distribución a priori invariante al reescalamiento p( σ 2 | I ) = 1/ σ 2 , que se puede argumentar (por ejemplo, siguiendo a Jeffreys ) que es la distribución a priori menos informativa posible para σ 2 en este problema, se obtiene una probabilidad a posteriori combinada.

pag(σ2|D,I,μ)1σnorte+2exp[inorte(incógnitaiμ)22σ2]{\displaystyle p(\sigma ^{2}|D,I,\mu )\propto {\frac {1}{\sigma ^{n+2}}}\;\exp \left[-{\frac {\sum _{i}^{n}(x_{i}-\mu )^{2}}{2\sigma ^{2}}}\right]}

Esta forma puede reconocerse como la de una distribución chi-cuadrado inversa escalada, con parámetros ν = n y τ 2 = s 2 = (1/ n ) Σ (x i - μ ) 2

Gelman y sus coautores señalan que la reaparición de esta distribución, vista previamente en un contexto de muestreo, puede parecer notable; pero dada la elección de la distribución a priori, "este resultado no es sorprendente". [ 1 ]

En particular, la elección de una distribución a priori invariante al reescalamiento para σ 2 tiene como resultado que la probabilidad para la razón de σ 2 / s 2 tiene la misma forma (independiente de la variable de condicionamiento) cuando está condicionada a s 2 que cuando está condicionada a σ 2 :

pag(σ2s2|s2)=pag(σ2s2|σ2){\displaystyle p({\tfrac {\sigma ^{2}}{s^{2}}}|s^{2})=p({\tfrac {\sigma ^{2}}{s^{2}}}|\sigma ^{2})}

En el caso de la teoría del muestreo, condicionada a σ 2 , la distribución de probabilidad para (1/s 2 ) es una distribución chi-cuadrado inversa escalada; y por lo tanto, la distribución de probabilidad para σ 2 condicionada a s 2 , dada una distribución a priori independiente de la escala, también es una distribución chi-cuadrado inversa escalada.

Utilizar como información previa

Si se conocen más los posibles valores de σ 2 , una distribución de la familia chi-cuadrado inversa escalada, como Scale-inv- χ 2 ( n 0 , s 0 2 ) puede ser una forma conveniente de representar una distribución a priori más informativa para σ 2 , como si fuera el resultado de n 0 observaciones previas (aunque n 0 no tiene por qué ser necesariamente un número entero):

pag(σ2|I,μ)1σnorte0+2exp[norte0s022σ2]{\displaystyle p(\sigma ^{2}|I^{\prime },\mu )\propto {\frac {1}{\sigma ^{n_{0}+2}}}\;\exp \left[-{\frac {n_{0}s_{0}^{2}}{2\sigma ^{2}}}\right]}

Tal distribución previa conduciría a la distribución posterior

pag(σ2|D,I,μ)1σnorte+norte0+2exp[nortes2+norte0s022σ2]{\displaystyle p(\sigma ^{2}|D,I^{\prime },\mu )\propto {\frac {1}{\sigma ^{n+n_{0}+2}}}\;\exp \left[-{\frac {ns^{2}+n_{0}s_{0}^{2}}{2\sigma ^{2}}}\right]}

que a su vez es una distribución chi-cuadrado inversa escalada. Las distribuciones chi-cuadrado inversas escaladas son, por lo tanto, una familia de distribuciones a priori conjugadas conveniente para la estimación de σ² .

Estimación de la varianza cuando se desconoce la media.

Si no se conoce la media, la distribución a priori menos informativa que se puede tomar para ella es posiblemente la distribución a priori invariante a la traslación p ( μ | I )   const., que da la siguiente distribución posterior conjunta para μ y σ 2 ,

pag(μ,σ2D,I)1σnorte+2exp[inorte(incógnitaiμ)22σ2]=1σnorte+2exp[inorte(incógnitaiincógnita¯)22σ2]exp[norte(μincógnita¯)22σ2]{\displaystyle {\begin{aligned}p(\mu ,\sigma ^{2}\mid D,I)&\propto {\frac {1}{\sigma ^{n+2}}}\exp \left[-{\frac {\sum _{i}^{n}(x_{i}-\mu )^{2}}{2\sigma ^{2}}}\right]\\&={\frac {1}{\sigma ^{n+2}}}\exp \left[-{\frac {\sum _{i}^{n}(x_{i}-{\bar {x}})^{2}}{2\sigma ^{2}}}\right]\exp \left[-{\frac {n(\mu -{\bar {x}})^{2}}{2\sigma ^{2}}}\right]\end{aligned}}}

La distribución posterior marginal para σ 2 se obtiene a partir de la distribución posterior conjunta integrando sobre μ ,

pag(σ2|D,I)1σnorte+2exp[inorte(incógnitaiincógnita¯)22σ2]exp[norte(μincógnita¯)22σ2]dμ=1σnorte+2exp[inorte(incógnitaiincógnita¯)22σ2]2πσ2/norte(σ2)(norte+1)/2exp[(norte1)s22σ2]{\displaystyle {\begin{aligned}p(\sigma ^{2}|D,I)\;\propto \;&{\frac {1}{\sigma ^{n+2}}}\;\exp \left[-{\frac {\sum _{i}^{n}(x_{i}-{\bar {x}})^{2}}{2\sigma ^{2}}}\right]\;\int _{-\infty }^{\infty }\exp \left[-{\frac {n(\mu -{\bar {x}})^{2}}{2\sigma ^{2}}}\right]d\mu \\=\;&{\frac {1}{\sigma ^{n+2}}}\;\exp \left[-{\frac {\sum _{i}^{n}(x_{i}-{\bar {x}})^{2}}{2\sigma ^{2}}}\right]\;{\sqrt {2\pi \sigma ^{2}/n}}\\\propto \;&(\sigma ^{2})^{-(n+1)/2}\;\exp \left[-{\frac {(n-1)s^{2}}{2\sigma ^{2}}}\right]\end{aligned}}}

Esta es nuevamente una distribución chi-cuadrado inversa escalada, con parámetrosnorte1{\displaystyle \scriptstyle {n-1}\;}ys2=(incógnitaiincógnita¯)2/(norte1){\displaystyle \scriptstyle {s^{2}=\sum (x_{i}-{\bar {x}})^{2}/(n-1)}}.

  • SiincógnitaEscala-inv-χ2(ν,τ2){\displaystyle X\sim {\mbox{Scale-inv-}}\chi ^{2}(\nu ,\tau ^{2})}entonceskincógnitaEscala-inv-χ2(ν,kτ2){\displaystyle kX\sim {\mbox{Scale-inv-}}\chi ^{2}(\nu ,k\tau ^{2})\,}
  • Siincógnitainv-χ2(ν){\displaystyle X\sim {\mbox{inv-}}\chi ^{2}(\nu )\,}( Distribución chi-cuadrado inversa ) entoncesincógnitaEscala-inv-χ2(ν,1/ν){\displaystyle X\sim {\mbox{Scale-inv-}}\chi ^{2}(\nu ,1/\nu )\,}
  • SiincógnitaEscala-inv-χ2(ν,τ2){\displaystyle X\sim {\mbox{Scale-inv-}}\chi ^{2}(\nu ,\tau ^{2})}entoncesincógnitaτ2νinv-χ2(ν){\displaystyle {\frac {X}{\tau ^{2}\nu }}\sim {\mbox{inv-}}\chi ^{2}(\nu )\,}( Distribución chi-cuadrado inversa )
  • SiincógnitaEscala-inv-χ2(ν,τ2){\displaystyle X\sim {\mbox{Scale-inv-}}\chi ^{2}(\nu ,\tau ^{2})}entoncesincógnitaInv-Gamma(ν2,ντ22){\displaystyle X\sim {\textrm {Inv-Gamma}}\left({\frac {\nu }{2}},{\frac {\nu \tau ^{2}}{2}}\right)}( Distribución gamma inversa )
  • La distribución chi cuadrado inversa escalada es un caso especial de la distribución de Pearson de tipo 5.

Referencias

  • Gelman, Andrew; et  al. (2014). Análisis de datos bayesianos (Tercera  ed.). Boca Raton: CRC Press. p.  583. ISBN 978-1-4398-4095-5.
  1. Gelman, Andrew; et al. (2014). Análisis de datos bayesianos (Tercera ed.). Boca Raton: CRC Press. pág. 65. ISBN    978-1-4398-4095-5.