Articulo de referencia

divergencia de la bola

La divergencia de bola (BD) es una estadística no paramétrica de dos muestras que cuantifica la discrepancia entre dos medidas de probabilidad. μ {\displaystyle \mu } y ν {\disp...

La divergencia de bola (BD) es una estadística no paramétrica de dos muestras que cuantifica la discrepancia entre dos medidas de probabilidad.μ{\displaystyle \mu }yν{\displaystyle \nu }en un espacio métrico(V,ρ){\displaystyle (V,\rho )}. [ 1 ] Se define integrando la diferencia al cuadrado de las medidas sobre todas las bolas cerradas enV{\displaystyle V}. DejarB¯(,r)={wVρ(,w)r}{\displaystyle {\overline {B}}(u,r)=\{w\in V\mid \rho (u,w)\leq r\}}sea ​​la bola cerrada de radior0{\displaystyle r\geq 0}centrado enV{\displaystyle u\in V}. De forma equivalente, se puede establecerr=ρ(,v){\displaystyle r=\rho (u,v)}y escribirB¯(,ρ(,v)){\displaystyle {\overline {B}}{\bigl (}u,\rho (u,v){\bigr )}}La divergencia de Ball se define entonces porBD(μ,ν)=V×V[μ(B¯(,ρ(,v)))ν(B¯(,ρ(,v)))]2[μ(d)μ(dv)+ν(d)ν(dv)].{\displaystyle BD(\mu ,\nu )=\iint _{V\times V}{\bigl [}\mu ({\overline {B}}(u,\rho (u,v)))-\nu ({\overline {B}}(u,\rho (u,v))){\bigr ]}^{2}\;{\bigl [}\mu (du)\,\mu (dv)+\nu (du)\,\nu (dv){\bigr ]}.} Esta medida puede verse como una integral de la distancia de Harald Cramér sobre todos los pares de puntos posibles. Sumando las diferencias al cuadrado deμ{\displaystyle \mu }yν{\displaystyle \nu }En bolas de todas las escalas, BD captura tanto las discrepancias globales como locales entre distribuciones, lo que produce una comparación robusta y sensible a la escala. Además, dado que BD se define como la integral de una diferencia de medida al cuadrado, siempre es no negativo yBD(μ,ν)=0{\displaystyle BD(\mu,\nu)=0}si y solo siμ=ν{\displaystyle \mu =\nu }.

Pruebas para comprobar la igualdad de distribuciones

A continuación, intentaremos dar un ejemplo de la divergencia de la bola. Para mayor comodidad, podemos descomponer la divergencia de la bola en dos partes: A=V×V[μν]2(B¯(,ρ(,v)))μ(d)μ(dv),{\displaystyle A=\iint _{V\times V}[\mu -\nu ]^{2}({\bar {B}}(u,\rho (u,v)))\mu (du)\mu (dv),} y do=V×V[μν]2(B¯(,ρ(,v)))ν(d)ν(dv).{\displaystyle C=\iint _{V\times V}[\mu -\nu ]^{2}({\bar {B}}(u,\rho (u,v)))\nu (du)\nu (dv).} De este modoBD(μ,ν)=A+do.{\displaystyle BD(\mu ,\nu )=A+C.}

Dejarδ(incógnita,y,z)=I(zB¯(incógnita,ρ(incógnita,y))){\displaystyle \delta (x,y,z)=I(z\in {\bar {B}}(x,\rho (x,y)))}denota si el puntoz{\displaystyle z}se localiza en la pelotaB¯(incógnita,ρ(incógnita,y)){\displaystyle {\bar {B}}(x,\rho (x,y))}Dados dos ejemplos independientes{incógnita1,,incógnitanorte}{\displaystyle \{X_{1},\ldots ,X_{n}\}}formaμ{\displaystyle \mu }y{Y1,,Ymetro}{\displaystyle \{Y_{1},\ldots ,Y_{m}\}}formaν{\displaystyle \nu }

Aijincógnita=1norte=1norteδ(incógnitai,incógnitaj,incógnita),AijY=1metrov=1metroδ(incógnitai,incógnitaj,Yv),doklincógnita=1norte=1norteδ(Yk,Yl,incógnita),doijY=1metrov=1metroδ(Yk,Yl,Yv),{\displaystyle {\begin{aligned}A_{ij}^{X}&={\frac {1}{n}}\sum _{u=1}^{n}\delta {\left(X_{i},X_{j},X_{u}\right)},&A_{ij}^{Y}&={\frac {1}{m}}\sum _{v=1}^{m}\delta {\left(X_{i},X_{j},Y_{v}\right)},\\C_{kl}^{X}&={\frac {1}{n}}\sum _{u=1}^{n}\delta {\left(Y_{k},Y_{l},X_{u}\right)},&C_{ij}^{Y}&={\frac {1}{m}}\sum _{v=1}^{m}\delta {\left(Y_{k},Y_{l},Y_{v}\right)},\end{aligned}}} dóndeAijincógnita{\displaystyle A_{ij}^{X}}significa la proporción de muestras de la medida de probabilidadμ{\displaystyle \mu }ubicado en la pelotaB¯(incógnitai,ρ(incógnitai,incógnitaj)){\displaystyle {\bar {B}}\left(X_{i},\rho \left(X_{i},X_{j}\right)\right)}yAijY{\displaystyle A_{ij}^{Y}}significa la proporción de muestras de la medida de probabilidadν{\displaystyle \nu }ubicado en la pelotaB¯(incógnitai,ρ(incógnitai,incógnitaj)){\displaystyle {\bar {B}}\left(X_{i},\rho \left(X_{i},X_{j}\right)\right)}. Mientras tanto,doijincógnita{\displaystyle C_{ij}^{X}}ydoijY{\displaystyle C_{ij}^{Y}}significa la proporción de muestras de la medida de probabilidadμ{\displaystyle \mu }yν{\displaystyle \nu }ubicado en la pelotaB¯(Yi,ρ(Yi,Yj)){\displaystyle {\bar {B}}\left(Y_{i},\rho \left(Y_{i},Y_{j}\right)\right)}. Las versiones de muestra deA{\displaystyle A}ydo{\displaystyle C}son los siguientes

Anorte,metro=1norte2i,j=1norte(AijincógnitaAijY)2,donorte,metro=1metro2k,l=1metro(doklincógnitadoklY)2.{\displaystyle A_{n,m}={\frac {1}{n^{2}}}\sum _{i,j=1}^{n}\left(A_{ij}^{X}-A_{ij}^{Y}\right)^{2},\qquad C_{n,m}={\frac {1}{m^{2}}}\sum _{k,l=1}^{m}\left(C_{kl}^{X}-C_{kl}^{Y}\right)^{2}.}

Finalmente, podemos dar la divergencia de la bola de muestra

BDnorte,metro=Anorte,metro+donorte,metro.{\displaystyle BD_{n,m}=A_{n,m}+C_{n,m}.}

Se puede demostrar queBDnorte,metro{\displaystyle BD_{n,m}}es un estimador consistente de BD. Además, sinortenorte+metroτ{\textstyle {\tfrac {n}{n+m}}\to \tau }para algunosτ[0,1]{\displaystyle \tau \in [0,1]}, entonces bajo la hipótesis nulaBDnorte,metro{\displaystyle BD_{n,m}}converge en distribución a una mezcla de distribuciones chi-cuadrado, mientras que bajo la hipótesis alternativa converge a una distribución normal .

Propiedades

  1. La raíz cuadrada de la divergencia de Ball es una divergencia simétrica pero no una métrica, porque no satisface la desigualdad triangular .
  2. Se puede demostrar que la divergencia de Ball, la prueba de distancia de energía [ 2 ] y MMD [ 3 ] están unificadas dentro del marco del variograma; para más detalles, véase la Observación 2.4 en [ 1 ] .

Prueba de homogeneidad

La divergencia de bolas admite una extensión directa al contexto de K muestras. Supongamos queμ1,,μK{\displaystyle \mu _{1},\dots ,\mu _{K}}sonK(2){\displaystyle K(\geq 2)}medidas de probabilidad en un espacio de Banach(V,){\displaystyle (V,\|\cdot \|)}. Defina la BD de K muestras mediante

D(μ1,,μK)=1k<lKV×V[μk(B¯(,ρ(,v)))μl(B¯(,ρ(,v)))]2[μk(d)μk(dv)+μl(d)μl(dv)].{\displaystyle D(\mu _{1},\dots ,\mu _{K})=\sum _{1\leq k<l\leq K}\iint _{V\times V}{\bigl [}\mu _{k}{\bigl (}{\overline {B}}(u,\rho (u,v)){\bigr )}-\mu _{l}{\bigl (}{\overline {B}}(u,\rho (u,v)){\bigr )}{\bigr ]}^{2}\;{\bigl [}\mu _{k}(du)\,\mu _{k}(dv)+\mu _{l}(du)\,\mu _{l}(dv){\bigr ]}.}

De los Teoremas 1 y 2 se deduce entonces queD(μ1,,μK)=0{\displaystyle D(\mu _{1},\dots ,\mu _{K})=0}si y solo siμ1=μ2==μK.{\displaystyle \mu _{1}=\mu _{2}=\cdots =\mu _{K}.}

Al emplear bolas cerradas para definir una función de distribución métrica, se obtiene una medida de homogeneidad alternativa. [ 4 ]

Dada una medida de probabilidadμ~{\displaystyle {\tilde {\mu }}}en un espacio métrico(V,ρ){\displaystyle (V,\rho )}, su función de distribución métrica se define por

Fμ~METRO(,v)=μ~(B¯(,ρ(,v)))=mi[δ(,v,incógnita)],,vV,{\displaystyle F_{\tilde {\mu }}^{M}(u,v)={\tilde {\mu }}{\bigl (}{\overline {B}}(u,\rho (u,v)){\bigr )}=\mathbb {E} {\bigl [}\delta (u,v,X){\bigr ]},\quad u,v\in V,}

dóndeB¯(,r)={wV:d(,w)r}{\displaystyle {\overline {B}}(u,r)=\{w\in V:d(u,w)\leq r\}}es la bola cerrada de radior0{\displaystyle r\geq 0}centrado en{\displaystyle u}, yδ(,v,incógnita)=k=1K1{incógnita(k)B¯k(k,ρk(k,vk))}.{\displaystyle \delta (u,v,X)=\prod _{k=1}^{K}\mathbf {1} \{X^{(k)}\in {\overline {B}}_{k}(u_{k},\rho _{k}(u_{k},v_{k}))\}.}

Si(incógnita1,,incógnitanorte){\displaystyle (X_{1},\dots ,X_{N})}son iid saca de(μ~){\displaystyle ({\tilde {\mu }})}, la versión empírica es

Fμ~,norteMETRO(,v)=1nortei=1norteδ(,v,incógnitai).{\displaystyle F_{{\tilde {\mu }},N}^{M}(u,v)={\frac {1}{N}}\sum _{i=1}^{N}\delta (u,v,X_{i}).}

Sobre la base de estos, la medida de homogeneidad basada en MDF, también llamada métrica de Cramér-von Mises (MCVM), es METROdoVMETRO(μkμ)=V×Vpagk2w(,v)[FμkMETRO(,v)FμMETRO(,v)]2dμk()dμk(v),{\displaystyle \mathrm {MCVM} {\bigl (}\mu _{k}\parallel \mu {\bigr )}=\int _{V\times V}p_{k}^{2}\,w(u,v)\,{\bigl [}F_{\mu _{k}}^{M}(u,v)-F_{\mu }^{M}(u,v){\bigr ]}^{2}\,d\mu _{k}(u)\,d\mu _{k}(v),}

dóndeμ=k=1Kpagkμk{\textstyle \mu =\sum _{k=1}^{K}p_{k}\,\mu _{k}}ser su mezcla con pesospag1,,pagK{\displaystyle p_{1},\dots ,p_{K}}, yw(,v)=exp(d(,v)22σ2){\textstyle w(u,v)=\exp \left(-{\tfrac {d(u,v)^{2}}{2\sigma ^{2}}}\right)}. El MCVM general es entonces

METROdoVMETRO(μ1,,μK)=k=1Kpagk2METROdoVMETRO(μkμ).{\displaystyle \mathrm {MCVM} (\mu _{1},\dots ,\mu _{K})=\sum _{k=1}^{K}p_{k}^{2}\,\mathrm {MCVM} {\bigl (}\mu _{k}\parallel \mu {\bigr )}.}

El MCVM empírico viene dado por

METROdoVMETRO^(μkμ)=1nortek2incógnitai(k),incógnitaj(k)incógnitakw(incógnitai(k),incógnitaj(k))[Fμk,nortekMETRO(incógnitai(k),incógnitaj(k))Fμ,norteMETRO(incógnitai(k),incógnitaj(k))]2.{\displaystyle {\widehat {\mathrm {MCVM} }}{\bigl (}\mu _{k}\parallel \mu {\bigr )}={\frac {1}{n_{k}^{2}}}\sum _{X_{i}^{(k)},X_{j}^{(k)}\in {\mathcal {X}}_{k}}w{\bigl (}X_{i}^{(k)},X_{j}^{(k)}{\bigr )}\,\left[F_{\mu _{k},n_{k}}^{M}{\bigl (}X_{i}^{(k)},X_{j}^{(k)}{\bigr )}-F_{\mu ,n}^{M}{\bigl (}X_{i}^{(k)},X_{j}^{(k)}{\bigr )}\right]^{2}.}

dóndeincógnitak={incógnita1(k),,incógnitanortek(k)}{\displaystyle {\mathcal {X}}_{k}=\{X_{1}^{(k)},\dots ,X_{n_{k}}^{(k)}\}}ser una muestra iid deμk{\displaystyle \mu _{k}}, ypag^k=nortek=1Knorte.{\displaystyle {\hat {p}}_{k}={\frac {n_{k}}{\sum _{\ell =1}^{K}n_{\ell }}}.} Una opción práctica paraσ2{\displaystyle \sigma ^{2}}es la mediana de las distancias al cuadrado {d(incógnita,incógnita)2:incógnita,incógnitak=1Kincógnitak}.{\displaystyle \left\{d(X,X')^{2}:X,X'\in \bigcup _{k=1}^{K}{\mathcal {X}}_{k}\right\}.}

Referencias

  1. 1 2 Pan, Wenliang; Tian, ​​Yuan; Wang, Xueqin; Zhang, Heping (2018-06-01). "Divergencia de bola: prueba no paramétrica de dos muestras" . The Annals of Statistics . 46 (3): 1109– 1137. doi : 10.1214/17-AOS1579 . ISSN 0090-5364 . PMC 6192286. PMID 30344356 .   
  2. Székely, Gábor J.; Rizzo, Maria L. (agosto de 2013). "Estadísticas energéticas: una clase de estadísticas basadas en distancias" . Journal of Statistical Planning and Inference . 143 (8): 1249– 1272. doi : 10.1016/j.jspi.2013.03.018 . ISSN 0378-3758 . 
  3. ^ Gretton, Arturo; Borgwardt, Karsten M.; Rasch, Malta; Schölkopf, Bernhard; Smola, Alexander J. (7 de septiembre de 2007), "Un método kernel para el problema de las dos muestras" , Avances en los sistemas de procesamiento de información neuronal 19 , The MIT Press, págs. 513–520 , doi : 10.7551/mitpress/7503.003.0069 , hdl : 1885/37327 , ISBN  978-0-262-25691-9, consultado el 28 de junio de 2024
  4. Wang, X., Zhu, J., Pan, W., Zhu, J., & Zhang, H. (2023). Inferencia estadística no paramétrica mediante la función de distribución métrica en espacios métricos. Journal of the American Statistical Association, 119(548), 2772–2784. https://doi.org/10.1080/01621459.2023.2277417