86.1. Dos resultados distintos sobre promedios

Los capítulos anteriores introdujeron distribuciones, condicionamiento, momentos, familias probabilísticas y heterogeneidad. Ahora aparece una pregunta inevitable. Si repetimos un experimento o acumulamos muchas realizaciones, ¿qué ocurre con los promedios?

Dos resultados dominan esta parte de la teoría:

leyes de grandes nuˊmeros\text{leyes de grandes números}

y

teorema central del lıˊmite.\text{teorema central del límite}.

Se parecen porque ambos estudian sumas o medias, aunque responden a preguntas diferentes.

Una ley de grandes números explica por qué

Xˉn=1n∑i=1nXi\bar X_n = \frac1n \sum_{i=1}^n X_i

se aproxima a una cantidad estable, habitualmente

μ=E[X].\mu=\mathbb E[X].

El teorema central del límite estudia la forma de las fluctuaciones restantes alrededor de esa media cuando las reescalamos apropiadamente:

n(Xˉn−μ).\sqrt n(\bar X_n-\mu).

La primera pregunta es de convergencia hacia una constante. La segunda es de distribución asintótica de los errores.

Confundirlas conduce a dos errores frecuentes, el de creer que la ley de grandes números implica normalidad y el de creer que el teorema central del límite es lo que hace converger la media.

86.2. El promedio muestral es una variable aleatoria

Sean

X1,X2,…,XnX_1,X_2,\ldots,X_n

variables aleatorias.

Antes de observarlas,

Xˉn=1n∑i=1nXi\bar X_n = \frac1n\sum_{i=1}^nX_i

también es una variable aleatoria.

Si las XiX_i son idénticamente distribuidas con media

E[Xi]=μ,\mathbb E[X_i]=\mu,

entonces, por linealidad,

E[Xˉn]=1n∑i=1nE[Xi]=μ.\mathbb E[\bar X_n] = \frac1n \sum_{i=1}^n \mathbb E[X_i] = \mu.

Esta igualdad no requiere independencia. El supuesto aparece cuando queremos controlar la variabilidad de la media.

Si además

Var⁡(Xi)=σ2\operatorname{Var}(X_i)=\sigma^2

y las variables son independientes,

Var⁡(Xˉn)=1n2∑i=1nVar⁡(Xi)=σ2n.\operatorname{Var}(\bar X_n) = \frac{1}{n^2} \sum_{i=1}^n \operatorname{Var}(X_i) = \frac{\sigma^2}{n}.

Por tanto,

SD⁡(Xˉn)=σn.\operatorname{SD}(\bar X_n) = \frac{\sigma}{\sqrt n}.

El promedio conserva la media y reduce su dispersión.

86.3. Una primera ley débil mediante Chebyshev

La desigualdad de Chebyshev establece que, para una variable YY con varianza finita,

P(∣Y−E[Y]∣≥ε)≤Var⁡(Y)ε2.P( |Y-\mathbb E[Y]| \geq \varepsilon ) \leq \frac{\operatorname{Var}(Y)}{\varepsilon^2}.

Apliquémosla a

Y=Xˉn.Y=\bar X_n.

Bajo variables independientes e idénticamente distribuidas con media μ\mu y varianza finita σ2\sigma^2,

P(∣Xˉn−μ∣≥ε)≤σ2nε2.P( |\bar X_n-\mu| \geq \varepsilon ) \leq \frac{\sigma^2} {n\varepsilon^2}.

Para cualquier

ε>0,\varepsilon>0,

el lado derecho tiende a cero cuando

n→∞.n\to\infty.

Entonces

Xˉn⟶Pμ\boxed{ \bar X_n \overset{P}{\longrightarrow} \mu }

Esta es una forma de la ley débil de los grandes números.

La notación

⟶P\overset{P}{\longrightarrow}

significa convergencia en probabilidad.

86.4. Qué significa convergencia en probabilidad

Decir

Xn⟶PXX_n \overset{P}{\longrightarrow} X

significa que, para todo

ε>0,\varepsilon>0,
P(∣Xn−X∣>ε)→0.P( |X_n-X|>\varepsilon ) \to0.

En el caso del promedio,

P(∣Xˉn−μ∣>ε)→0.P( |\bar X_n-\mu|>\varepsilon ) \to0.

No significa que exista un nn finito después del cual toda media sea exactamente μ\mu.

Tampoco significa que una secuencia concreta de medias deba acercarse monótonamente. Puede oscilar, alejarse temporalmente y volver a aproximarse.

La afirmación es probabilística. Para nn grande, la masa de la distribución de Xˉn\bar X_n se concentra en cualquier vecindad fija de μ\mu.

86.5. Bernoulli como ejemplo exacto

Tomemos

Xi∼Bernoulli⁡(p),p=0.2,X_i\sim\operatorname{Bernoulli}(p), \qquad p=0.2,

independientes.

Entonces

μ=p=0.2,\mu=p=0.2,
σ2=p(1−p)=0.16.\sigma^2=p(1-p)=0.16.

La media

Xˉn\bar X_n

es la proporción de éxitos en nn ensayos.

Su varianza es

Var⁡(Xˉn)=0.16n.\operatorname{Var}(\bar X_n) = \frac{0.16}{n}.

Con

ε=0.05,\varepsilon=0.05,

Chebyshev produce

P(∣Xˉn−0.2∣≥0.05)≤0.160.0025 n=64n.P( |\bar X_n-0.2| \geq0.05 ) \leq \frac{0.16}{0.0025\,n} = \frac{64}{n}.

Para n<64n<64, esta cota supera uno y solo resulta útil después de truncarla en uno. Para valores mayores disminuye como 1/n1/n.

Ley débil y Chebyshev.
Ley débil y Chebyshev Ampliar figura ↗

La probabilidad exacta binomial cae mucho más rápido que la cota. Chebyshev es una desigualdad general y no busca ajustarse a este caso particular.

86.6. Una sola trayectoria también puede estabilizarse

El paquete reproduce cuatro secuencias Bernoulli de longitud 5000 y calcula

Xˉ1,Xˉ2,…\bar X_1,\bar X_2,\ldots

a lo largo de cada trayectoria.

Medias corrientes Bernoulli.
Medias corrientes Bernoulli Ampliar figura ↗

Al principio, cada nueva observación puede modificar mucho el promedio. Cuando nn crece, su peso individual es

1n.\frac1n.

La figura ilustra estabilización alrededor de 0.20.2, pero una figura no demuestra el teorema.

También conviene notar que la media acumulada no se vuelve inmóvil. Continúa fluctuando a escalas cada vez menores.

86.7. Ley fuerte de los grandes números

Existe una noción de convergencia más fuerte.

Decimos

Xn⟶a.s.XX_n \overset{\mathrm{a.s.}}{\longrightarrow} X

si

P({ω:Xn(ω)→X(ω)})=1.P( \{\omega: X_n(\omega)\to X(\omega)\} ) = 1.

La abreviatura a.s. significa almost surely, es decir, casi seguramente.

Para variables independientes e idénticamente distribuidas con

E[∣X1∣]<∞,\mathbb E[|X_1|]<\infty,

la ley fuerte establece

Xˉn⟶a.s.μ\boxed{ \bar X_n \overset{\mathrm{a.s.}}{\longrightarrow} \mu }

donde

μ=E[X1].\mu=\mathbb E[X_1].

La hipótesis de varianza finita utilizada en la demostración elemental con Chebyshev no es necesaria para esta versión i.i.d. de la ley fuerte. La integrabilidad de X1X_1 basta.

86.8. Convergencia casi segura frente a convergencia en probabilidad

La convergencia casi segura es más fuerte:

Xn⟶a.s.X⟹Xn⟶PX.X_n\overset{\mathrm{a.s.}}{\longrightarrow}X \quad\Longrightarrow\quad X_n\overset{P}{\longrightarrow}X.

La implicación inversa no vale en general. La diferencia puede entenderse preguntando qué conjunto de realizaciones consideramos.

La convergencia en probabilidad permite que, para cada nn, exista un conjunto de trayectorias problemáticas cuya probabilidad se hace pequeña, aunque esos conjuntos puedan cambiar con nn.

La convergencia casi segura afirma que existe un conjunto fijo de probabilidad uno dentro del cual la trayectoria completa termina convergiendo.

El conjunto de excepciones matemáticas tiene probabilidad cero, de modo que la afirmación no las descarta una por una.

86.9. La independencia no es una decoración

Hasta ahora la independencia ha permitido reducir la varianza del promedio:

Var⁡(Xˉn)=σ2n.\operatorname{Var}(\bar X_n) = \frac{\sigma^2}{n}.

Sin independencia,

Var⁡(Xˉn)=1n2[∑i=1nVar⁡(Xi)+2∑i<jCov⁡(Xi,Xj)].\operatorname{Var}(\bar X_n) = \frac1{n^2} \left[ \sum_{i=1}^n \operatorname{Var}(X_i) + 2\sum_{i<j} \operatorname{Cov}(X_i,X_j) \right].

Los términos de covarianza pueden impedir que la varianza disminuya como 1/n1/n.

La dependencia no destruye automáticamente toda ley de grandes números. Existen teoremas para numerosas formas de dependencia débil, procesos estacionarios y estructuras ergódicas.

Ahora bien, no podemos eliminar el supuesto sin reemplazarlo por condiciones alternativas.

86.10. Un contraejemplo de dependencia perfecta

Sea una única variable

Z∼Bernoulli⁡(0.2),Z\sim\operatorname{Bernoulli}(0.2),

y definamos Xi=ZX_i=Z para todo ii.

Cada XiX_i tiene la misma distribución Bernoulli que antes.

Sin embargo,

Xˉn=1n∑i=1nZ=Z.\bar X_n = \frac1n \sum_{i=1}^nZ = Z.

Por tanto,

Var⁡(Xˉn)=Var⁡(Z)=0.16\operatorname{Var}(\bar X_n) = \operatorname{Var}(Z) = 0.16

para todo nn.

Aumentar el tamaño muestral equivale aquí a copiar repetidamente la misma realización, sin añadir información independiente. La media permanece exactamente en 0 o en 1 según el valor de ZZ, sin converger a 0.20.2.

Este ejemplo muestra que «muchos datos» no equivale a «muchas realizaciones informativas».

86.11. Qué pregunta queda después de la ley de grandes números

La ley de grandes números explica que

Xˉn−μ→0\bar X_n-\mu \to0

bajo las hipótesis correspondientes.

Ese resultado, sin embargo, elimina la estructura que queremos estudiar si preguntamos por el error, de modo que necesitamos amplificar la diferencia.

Como

Var⁡(Xˉn)=σ2n,\operatorname{Var}(\bar X_n) = \frac{\sigma^2}{n},

su escala típica es

σn.\frac{\sigma}{\sqrt n}.

Esto sugiere estudiar

Xˉn−μσ/n=n(Xˉn−μ)σ.\frac{ \bar X_n-\mu }{ \sigma/\sqrt n } = \frac{ \sqrt n(\bar X_n-\mu) }{\sigma}.

El teorema central del límite describe el comportamiento de esta variable estandarizada.

86.12. Teorema central del límite i.i.d.

Sean

X1,X2,…X_1,X_2,\ldots

independientes e idénticamente distribuidas, con

E[Xi]=μ,\mathbb E[X_i]=\mu,

y

0<Var⁡(Xi)=σ2<∞.0<\operatorname{Var}(X_i)=\sigma^2<\infty.

Entonces

n(Xˉn−μ)σ⟶dN(0,1)\boxed{ \frac{ \sqrt n(\bar X_n-\mu) }{\sigma} \overset{d}{\longrightarrow} N(0,1) }

La notación

⟶d\overset{d}{\longrightarrow}

significa convergencia en distribución.

Equivalentemente,

∑i=1nXi−nμσn⟶dN(0,1).\frac{ \sum_{i=1}^nX_i-n\mu }{ \sigma\sqrt n } \overset{d}{\longrightarrow} N(0,1).

El resultado afirma que la suma centrada y estandarizada adquiere una distribución aproximadamente normal cuando nn crece bajo las hipótesis del teorema, sin decir nada sobre la normalidad de los XiX_i.

86.13. El TCL no dice que los datos se vuelvan normales

Supongamos otra vez

Xi∼Bernoulli⁡(0.2).X_i\sim\operatorname{Bernoulli}(0.2).

Cada XiX_i solo puede tomar 0 o 1, sin importar cuán grande sea nn.

La distribución que se aproxima a una normal es la de

Zn=∑iXi−npnp(1−p),Z_n = \frac{ \sum_iX_i-np }{ \sqrt{np(1-p)} },

no la distribución de cada observación individual.

Esta distinción parece obvia algebraicamente y, sin embargo, es una fuente frecuente de confusión aplicada.

El tamaño muestral puede normalizar aproximadamente ciertas sumas y medias estandarizadas, sin transformar en normal una variable Bernoulli, exponencial o lognormal.

86.14. Bernoulli y convergencia hacia la normal

Para la Bernoulli con p=0.2,p=0.2, el paquete calcula exactamente la distribución binomial de la suma y la compara con la CDF normal estándar después de estandarizar.

La distancia de Kolmogorov disminuye aproximadamente desde 0.2370.237 para n=5n=5 hasta 0.0270.027 para n=500.n=500.

TCL para medias Bernoulli.
TCL para medias Bernoulli Ampliar figura ↗

La aproximación no es exacta. La distribución binomial sigue siendo discreta y la normal continua.

En tamaños pequeños, la granularidad y la asimetría son visibles. A medida que aumenta nn, la distribución estandarizada se aproxima a la forma gaussiana.

86.15. Por qué aparece n\sqrt n

La escala

n\sqrt n

obedece a una razón precisa.

Tenemos

Var⁡(Xˉn−μ)=σ2n.\operatorname{Var}(\bar X_n-\mu) = \frac{\sigma^2}{n}.

Multiplicando por n\sqrt n,

Var⁡[n(Xˉn−μ)]=nσ2n=σ2.\operatorname{Var} \left[ \sqrt n(\bar X_n-\mu) \right] = n\frac{\sigma^2}{n} = \sigma^2.

Después de dividir por σ\sigma,

Var⁡(Zn)=1.\operatorname{Var}(Z_n)=1.

Sin reescalamiento, la distribución de

Xˉn−μ\bar X_n-\mu

colapsaría hacia cero por la ley de grandes números.

El TCL encuentra la escala precisa donde las fluctuaciones permanecen de orden uno y adquieren un límite no degenerado.

86.16. Una aproximación de error estándar

El resultado

SD⁡(Xˉn)=σn\operatorname{SD}(\bar X_n) = \frac{\sigma}{\sqrt n}

precede al TCL y es exacto bajo independencia y varianza común.

El TCL añade que, para nn suficientemente grande bajo sus hipótesis,

Xˉn\bar X_n

puede aproximarse por

N(μ,σ2n).N\left( \mu, \frac{\sigma^2}{n} \right).

Esto permite aproximar probabilidades de error.

Por ejemplo,

P(∣Xˉn−μ∣≤1.96 σ/n)P( |\bar X_n-\mu| \leq 1.96\,\sigma/\sqrt n )

se aproxima a 0.950.95 en el límite normal.

La precisión para un nn concreto depende de la distribución original.

86.17. El tamaño muestral necesario no es universal

No existe un número mágico como n=30n=30 que garantice una aproximación normal suficientemente buena en cualquier problema.

La velocidad depende de la distribución.

Una variable casi simétrica y de colas ligeras puede aproximarse con tamaños relativamente modestos. Una distribución muy asimétrica o con colas importantes puede requerir muestras mucho mayores.

La variable de interés también importa. Aproximar la región central puede ser mucho más fácil que aproximar probabilidades extremas de cola.

Por eso «el TCL aplica» y «la aproximación normal es suficientemente precisa para esta decisión» son afirmaciones distintas.

86.18. El teorema de Berry–Esseen y la velocidad de convergencia

Bajo hipótesis adicionales puede cuantificarse la velocidad de convergencia.

Para variables i.i.d. con

E[X]=μ,Var⁡(X)=σ2>0,\mathbb E[X]=\mu, \qquad \operatorname{Var}(X)=\sigma^2>0,

y tercer momento absoluto centrado finito

ρ=E[∣X−μ∣3]<∞,\rho = \mathbb E[ |X-\mu|^3 ] <\infty,

el teorema de Berry–Esseen proporciona una cota de la forma

sup⁡x∣P(Zn≤x)−Φ(x)∣≤Cρσ3n,\sup_x \left| P(Z_n\leq x)-\Phi(x) \right| \leq C \frac{\rho} {\sigma^3\sqrt n},

donde CC es una constante universal.

El mensaje principal es la escala n−1/2.n^{-1/2}.

La constante y el cociente ρ/σ3\rho/\sigma^3 influyen en cuán útil es la cota para un problema concreto.

El TCL es asintótico. Berry–Esseen añade una forma de controlar error finito bajo condiciones más fuertes.

86.19. Ley de grandes números sin TCL clásico

Ahora consideremos una distribución Pareto con escala mínima uno y exponente α=1.5.\alpha=1.5.

Su cola satisface

P(X>x)=x−1.5,x≥1.P(X>x)=x^{-1.5}, \qquad x\geq1.

Como

α>1,\alpha>1,

la media existe:

E[X]=αα−1=3.\mathbb E[X] = \frac{\alpha}{\alpha-1} = 3.

Como, en cambio,

α<2,\alpha<2,

el segundo momento diverge:

E[X2]=∞.\mathbb E[X^2]=\infty.

Por tanto, la varianza es infinita.

La ley fuerte i.i.d. puede seguir aplicándose porque

E[∣X∣]<∞.\mathbb E[|X|]<\infty.

Así,

Xˉn⟶a.s.3.\bar X_n \overset{\mathrm{a.s.}}{\longrightarrow} 3.

Sin embargo, el TCL clásico de varianza finita no puede utilizarse.

86.20. Convergencia más lenta bajo cola pesada

La figura reproducible compara el error mediano de la media en dos modelos.

El primero es la Pareto con α=1.5.\alpha=1.5.

El segundo es una exponencial con media uno y varianza finita.

Media finita sin TCL clásico.
Media finita sin TCL clásico Ampliar figura ↗

Para la exponencial, el error mediano de la media decrece aproximadamente con pendiente log-log −0.50,-0.50, compatible con la escala n−1/2.n^{-1/2}.

Para la Pareto, la pendiente simulada es aproximadamente −0.31,-0.31, cercana a la escala n−1/3n^{-1/3} esperable en este régimen estable de cola.

La media converge, pero sus fluctuaciones no siguen la escala gaussiana clásica.

86.21. La presencia de valores extremos no contradice la ley fuerte

En la Pareto, incluso para nn grande pueden aparecer observaciones enormes.

Una sola observación de magnitud comparable con nn puede modificar apreciablemente el promedio.

La ley fuerte afirma que, después de normalizar por nn, la suma total termina comportándose de manera compatible con la media finita casi seguramente, sin excluir la aparición de extremos.

La convergencia puede ser lenta e irregular.

El punto cuenta porque una trayectoria visualmente inestable no contradice automáticamente una ley asintótica. La escala del error puede disminuir mucho más lentamente que en distribuciones de varianza finita.

86.22. Varianza infinita no significa que toda muestra tenga varianza infinita

Cualquier muestra finita produce números finitos con probabilidad uno en la distribución Pareto considerada.

Podemos calcular una varianza muestral ordinaria sin que de ello se siga la existencia de una varianza poblacional finita.

La propiedad

Var⁡(X)=∞\operatorname{Var}(X)=\infty

se refiere a la integral o suma teórica del segundo momento bajo la distribución generadora.

Una estadística calculada en datos finitos puede existir incluso cuando el parámetro poblacional que intenta aproximar no existe como número finito.

Esta separación continúa el principio de C83 entre estadístico y propiedad distributiva.

86.23. El TCL también tiene versiones más generales

El teorema i.i.d. de varianza finita no es el único teorema central del límite.

Existen extensiones para variables independientes no idénticamente distribuidas bajo condiciones como las de Lindeberg o Lyapunov. Existen también TCL para diversas secuencias dependientes, martingalas, procesos de Markov y otros sistemas.

No desarrollaremos esas teorías aquí. El propósito de C86 es dominar la forma canónica y entender qué función cumplen las hipótesis.

La existencia de generalizaciones obliga a buscar el teorema apropiado cuando la estructura se aparta del caso i.i.d., sin autorizar la aplicación del TCL sin verificar condiciones.

86.24. Dependencia débil puede conservar una escala gaussiana

La dependencia perfecta de C86.10 destruyó la reducción de varianza, sin que toda dependencia tenga ese efecto.

Si una secuencia estacionaria tiene covarianzas

γ(k)=Cov⁡(Xt,Xt+k)\gamma(k) = \operatorname{Cov}(X_t,X_{t+k})

que decaen suficientemente rápido, la varianza de la suma puede crecer todavía de forma aproximadamente lineal en nn.

En ese caso, la varianza asintótica de la media puede involucrar

γ(0)+2∑k=1∞γ(k),\gamma(0) + 2\sum_{k=1}^{\infty}\gamma(k),

en vez de solo σ2.\sigma^2.

La idea anticipa un tema posterior, porque con datos correlacionados nn observaciones no equivalen necesariamente a nn observaciones independientes.

La velocidad de acumulación de información depende de la dependencia temporal.

86.25. La normalidad de una suma no prueba independencia

El TCL tiene una dirección lógica específica.

Bajo ciertas condiciones sobre las variables componentes, una suma estandarizada se aproxima a una normal.

Observar una distribución aproximadamente normal para una suma no permite invertir el razonamiento y concluir que los sumandos eran independientes o idénticamente distribuidos.

Muchos mecanismos pueden producir formas aproximadamente gaussianas.

Incluso una variable individual puede ser normal por construcción, sin ser suma de nada en el modelo utilizado.

La normalidad es una propiedad distributiva. El TCL es uno de los mecanismos matemáticos capaces de producirla asintóticamente.

86.26. El promedio de una mezcla y la unidad de muestreo

C85 estudió heterogeneidad entre componentes.

Supongamos que cada observación selecciona de nuevo una componente de una mezcla de manera independiente. Entonces los XiX_i pueden ser i.i.d. respecto de la distribución marginal de mezcla y una ley de grandes números puede estabilizar el promedio marginal.

Si cada grupo, en cambio, selecciona una componente una sola vez y después produce muchas observaciones condicionadas al mismo estado latente, aparece dependencia dentro de grupo.

Promediar 100 observaciones de una sola unidad heterogénea no equivale a promediar una observación de 100 unidades independientes.

La pregunta «¿cuál es nn?» requiere especificar cuál es la unidad independiente de muestreo.

Este problema reaparecerá en modelos jerárquicos y datos agrupados.

86.27. Error estándar no es desviación estándar de los datos

La desviación estándar poblacional es σ.\sigma.

La desviación estándar de la media bajo muestreo i.i.d. es

σn.\frac{\sigma}{\sqrt n}.

Esta segunda cantidad suele llamarse error estándar de la media.

Describe cuánto varía el estimador

Xˉn\bar X_n

entre muestras repetidas de tamaño nn, más que cuánto varían las observaciones individuales.

Aumentar nn reduce el error estándar sin reducir necesariamente la heterogeneidad individual σ\sigma.

Confundir ambas escalas puede hacer parecer que una población se vuelve menos variable simplemente porque estimamos su media con mayor precisión.

86.28. Cuatro tipos de afirmación que deben mantenerse separados

Los resultados de este capítulo pueden organizarse en cuatro niveles.

Primero, una propiedad de la distribución individual:

E[X]=μ,Var⁡(X)=σ2.\mathbb E[X]=\mu, \qquad \operatorname{Var}(X)=\sigma^2.

Segundo, una propiedad exacta de la media finita bajo independencia:

E[Xˉn]=μ,Var⁡(Xˉn)=σ2n.\mathbb E[\bar X_n]=\mu, \qquad \operatorname{Var}(\bar X_n)=\frac{\sigma^2}{n}.

Tercero, una afirmación asintótica de concentración:

Xˉn→μ.\bar X_n\to\mu.

Cuarto, una afirmación asintótica sobre la forma de las fluctuaciones:

n(Xˉn−μ)σ⟶dN(0,1).\frac{\sqrt n(\bar X_n-\mu)}{\sigma} \overset d\longrightarrow N(0,1).

Ningún nivel debe sustituirse silenciosamente por otro.

86.29. Normalidad exacta y normalidad asintótica

Existe un caso donde no necesitamos esperar al límite.

Si

Xi∼N(μ,σ2)X_i\sim N(\mu,\sigma^2)

son independientes, entonces cualquier combinación lineal es normal. En particular,

Xˉn∼N(μ,σ2n)\bar X_n \sim N\left( \mu, \frac{\sigma^2}{n} \right)

exactamente para todo n≥1n\geq1.

Aquí la normalidad de la media proviene del cierre algebraico de la familia normal bajo sumas independientes, sin intervención de ninguna aproximación central.

El TCL se vuelve importante cuando la distribución original no es normal.

Para Bernoulli, exponencial o muchas otras distribuciones con varianza finita, la normalidad de la media es asintótica:

n(Xˉn−μ)σ⟶dN(0,1).\frac{\sqrt n(\bar X_n-\mu)}{\sigma} \overset d\longrightarrow N(0,1).

Distinguir ambos casos evita expresiones vagas como «la media es normal por el TCL». Si los datos originales son gaussianos, la distribución de la media ya es normal exactamente. Si no lo son, necesitamos un argumento asintótico y debemos evaluar si nn es suficiente para la precisión requerida.

También existen distribuciones para las que la suma permanece dentro de otra familia estable. La Cauchy es un ejemplo conocido, porque el promedio de variables Cauchy i.i.d. tiene la misma distribución Cauchy y no se concentra alrededor de una media finita, porque esa media no existe. C88 retomará el papel de las colas amplias; aquí basta notar que la suma no tiene por qué dirigirse hacia el régimen gaussiano cuando fallan las hipótesis relevantes.

86.30. Discreción y corrección de continuidad

En el ejemplo Bernoulli, la suma

Kn=∑i=1nXiK_n=\sum_{i=1}^nX_i

es discreta, mientras la aproximación normal es continua.

Si queremos aproximar una probabilidad como

P(Kn≤k),P(K_n\leq k),

una aproximación simple sería

P(Z≤k−npnp(1−p)).P\left( Z \leq \frac{k-np}{\sqrt{np(1-p)}} \right).

Sin embargo, el evento discreto Kn≤kK_n\leq k incluye toda la masa del punto kk. Una aproximación clásica mejora a menudo al extender el límite hasta la mitad del siguiente intervalo:

P(Kn≤k)≈Φ(k+1/2−npnp(1−p)).P(K_n\leq k) \approx \Phi\left( \frac{k+1/2-np} {\sqrt{np(1-p)}} \right).

El término 1/21/2 es una corrección de continuidad. Se trata de una mejora finita para el caso en que usamos una distribución continua para aproximar una variable que vive sobre una retícula entera, sin que el TCL quede modificado.

Su utilidad disminuye a medida que los saltos individuales representan una fracción menor de la escala total. En tamaños pequeños o probabilidades muy cercanas a cero o uno, la aproximación puede seguir siendo pobre aun con corrección.

Este ejemplo recuerda una regla general. Un teorema asintótico especifica un límite, mientras convertirlo en una aproximación numérica para nn finito puede requerir correcciones adicionales y evaluación de error.

86.31. Un TCL no es una licencia para ignorar colas

El teorema central del límite controla la distribución de una suma estandarizada en el límite bajo sus hipótesis. No afirma que las colas de la distribución original se vuelvan irrelevantes en cualquier tamaño finito.

Supongamos que XX tiene varianza finita pero una cola derecha muy asimétrica. En muestras moderadas, unas pocas observaciones grandes pueden dominar el promedio. La región central de la distribución de

Zn=n(Xˉn−μ)σZ_n = \frac{\sqrt n(\bar X_n-\mu)}{\sigma}

puede parecer aproximadamente normal antes de que sus colas estén bien aproximadas.

Esto importa si la pregunta científica es

P(Xˉn−μ>c)P( \bar X_n-\mu > c )

para un umbral extremo.

Una aproximación suficientemente buena cerca de la mediana no garantiza precisión en una probabilidad de 10−410^{-4}.

Berry–Esseen controla una distancia uniforme bajo tercer momento absoluto finito, pero su cota puede ser conservadora y no resuelve todos los problemas de cola. Existen teorías específicas de desviaciones moderadas y grandes desviaciones para preguntas más extremas.

No las desarrollaremos aquí. La idea necesaria es más sencilla. La adecuación del TCL debe juzgarse respecto del evento que queremos aproximar, más que por el aspecto central de un histograma.

86.32. Auditoría mínima antes de invocar una ley límite

Antes de aplicar una ley de grandes números o un TCL conviene identificar cinco elementos.

El primero es la unidad de repetición. Conviene precisar qué cuenta como un XiX_i, porque repetir mediciones de una misma unidad puede introducir dependencia que no existe entre unidades.

El segundo es la cantidad objetivo. Para una ley de grandes números necesitamos saber qué esperanza se pretende aproximar y si esa esperanza existe.

El tercero es la dependencia. El caso i.i.d. es un punto de partida antes que una descripción automática de todos los datos. Si existe agrupamiento, series temporales o estados latentes compartidos, deben evaluarse teoremas compatibles con esa estructura.

El cuarto son los momentos. El TCL clásico utilizado aquí requiere

0<σ2<∞,0<\sigma^2<\infty,

de modo que una media finita no basta.

El quinto es el tamaño y la región de interés. Un límite asintótico puede ser correcto y una aproximación finita, insuficiente. La distribución original, su asimetría y sus colas influyen en la velocidad.

Esta auditoría separa tres afirmaciones:

el teorema es matemaˊticamente aplicable,\text{el teorema es matemáticamente aplicable},
el reˊgimen asintoˊtico ya es visible,\text{el régimen asintótico ya es visible},

y

la aproximacioˊn es suficientemente precisa para la pregunta.\text{la aproximación es suficientemente precisa para la pregunta}.

Las tres necesitan argumentos distintos.

86.33. La precisión mejora con rendimientos decrecientes

La escala

SD⁡(Xˉn)=σn\operatorname{SD}(\bar X_n) = \frac{\sigma}{\sqrt n}

tiene una consecuencia práctica inmediata.

Si queremos reducir el error estándar por un factor dos, necesitamos multiplicar nn por cuatro:

σ4n=12σn.\frac{\sigma}{\sqrt{4n}} = \frac12 \frac{\sigma}{\sqrt n}.

Para reducirlo por un factor diez, necesitamos aproximadamente cien veces más observaciones independientes. La precisión, por tanto, no mejora linealmente con el tamaño muestral.

Este resultado ayuda a distinguir cantidad de datos y cantidad de información. Si las observaciones son independientes y el modelo de varianza finita es adecuado, aumentar nn produce beneficios previsibles pero decrecientes. Si existe dependencia positiva, la ganancia puede ser menor porque el tamaño muestral nominal sobrestima el número de realizaciones efectivamente distintas.

También explica por qué muestras gigantes no corrigen automáticamente un sesgo sistemático. La ley de grandes números concentra el promedio alrededor de su esperanza bajo el modelo generador. Si la variable observada está desplazada por un error de medición o el mecanismo de selección cambia la distribución, más observaciones pueden estimar con enorme precisión la cantidad equivocada.

Las leyes límite controlan la variación aleatoria, sin reparar por sí solas una representación sesgada del problema. Esta diferencia debe conservarse siempre que se interprete precisión estadística como calidad de conocimiento sobre el sistema.

86.34. Verificación computacional

El paquete reproducible ejecuta controles sobre los tres escenarios centrales.

Para Bernoulli con

p=0.2,p=0.2,

verifica

μ=0.2,σ2=0.16,\mu=0.2, \qquad \sigma^2=0.16,

y la identidad

Var⁡(Xˉn)=0.16n.\operatorname{Var}(\bar X_n)=\frac{0.16}{n}.

Calcula exactamente

P(∣Xˉn−μ∣≥0.05)P( |\bar X_n-\mu| \geq0.05 )

mediante la distribución binomial y confirma que nunca supera la cota de Chebyshev. Las simulaciones coinciden con las probabilidades exactas dentro de tolerancias prefijadas.

Para el TCL, el código calcula la distancia de Kolmogorov entre la distribución estandarizada binomial y la normal estándar. La distancia disminuye monótonamente en los tamaños estudiados y alcanza aproximadamente 0.0270.027 en n=500n=500.

El contraejemplo dependiente define Xi=ZX_i=Z para una única Bernoulli ZZ y comprueba que la varianza de la media permanece cerca de 0.160.16 para n=1,10,100,1000n=1,10,100,1000.

Finalmente simula la Pareto con α=1.5\alpha=1.5 y un control exponencial de varianza finita. El error mediano del promedio decrece en ambos, pero la escala estimada para Pareto es aproximadamente n−0.31n^{-0.31}, frente a n−0.50n^{-0.50} en el control.

Se ejecutaron 29 comprobaciones automáticas y las 29 resultaron satisfactorias.

86.35. Qué queda establecido

La ley de grandes números y el teorema central del límite estudian promedios desde perspectivas distintas.

La ley de grandes números explica concentración:

Xˉn→μ.\bar X_n\to\mu.

El TCL clásico explica la forma de las fluctuaciones reescaladas:

n(Xˉn−μ)\sqrt n(\bar X_n-\mu)

se vuelve aproximadamente gaussiana después de normalizar por σ\sigma.

La independencia y los momentos determinan cómo disminuye la variabilidad y qué teoremas pueden utilizarse, lejos de ser detalles técnicos sin significado.

La dependencia perfecta muestra que repetir la misma información no produce estabilización. La Pareto con α=1.5\alpha=1.5 muestra que una media finita puede ser suficiente para una ley fuerte y, al mismo tiempo, insuficiente para el TCL clásico de varianza finita.

Los límites asintóticos tampoco garantizan precisión a cualquier tamaño muestral. La pregunta práctica siempre requiere saber qué distribución, qué dependencia, qué escala de error y qué observable se están considerando.

C87 continuará con Monte Carlo y el aprendizaje mediante realizaciones repetidas. Allí las leyes de grandes números dejarán de ser solo resultados teóricos y se convertirán en la base explícita de un método computacional para aproximar cantidades que no podemos o no queremos calcular analíticamente.


Referencias


Recursos reproducibles

Descargar recursos del capítulo (ZIP, 508 kB).

5 archivos CSV · 4 figuras · 1 programa Python.

El programa se ha ejecutado en una carpeta vacía y genera los archivos de datos y figuras incluidos en el paquete.

Ver instrucciones y contenido del paquete.