Significación estadística y relevancia práctica

1 · Dos preguntas distintas

Significación estadística: ¿el efecto es distinguible del azar del muestreo? La contesta el valor p.

Relevancia práctica: ¿el efecto es lo bastante grande como para importar? La contestan el tamaño del efecto, el intervalo de confianza y el conocimiento del campo, que no es un dato estadístico.

2 · Las cuatro combinaciones

	Efecto grande	Efecto chico
Significativo	El caso ideal: se detectó algo importante	Muestra grande: real pero puede no importar
No significativo	Muestra chica: hay que seguir investigando	Evidencia de que no hay efecto relevante

Las dos casillas de la diagonal secundaria son las que se malinterpretan:

Significativo con efecto chico. No es un error: el efecto existe. Pero hay que preguntarse si justifica una decisión. Es lo que produce cualquier muestra grande.

No significativo con efecto grande. El estudio no tuvo potencia. Concluir “no hay efecto” es el error; lo correcto es decir que el estudio no alcanzó para decidir.

3 · Los ejemplos de la EPH

Resultado	$p$	Efecto	Lectura
Brecha de ingresos por sexo	$< 10^{-70}$	$d = 0{,}29$ · $291.750	Significativo y relevante en pesos
Registración difiere del 60 %	$4 \times 10^{-10}$	2,6 puntos · $h = 0{,}053$	Significativo, poco relevante
Ingreso medio vs $1.000.000	0,225	$9.799	No significativo, y el IC angosto confirma que el efecto es chico

El tercero muestra el caso valioso de un no significativo informativo: el intervalo va de $974.370 a $1.006.032, así que la diferencia respecto del millón es a lo sumo de unos $26.000. Eso sí es evidencia de ausencia de efecto grande, y solo se ve mirando el intervalo.

4 · Por qué la muestra grande vuelve todo significativo

$$t = \frac{\text{efecto}}{s/\sqrt{n}}$$

El denominador se achica con $\sqrt{n}$, así que el estadístico crece sin límite aunque el efecto sea constante y minúsculo. Con $n$ suficiente, cualquier diferencia distinta de cero cruza el umbral.

Como las hipótesis nulas exactas casi nunca son literalmente ciertas, con $n$ grande se rechaza siempre. La pregunta “¿es cero?” deja de ser interesante y la única útil pasa a ser “¿cuánto vale?”.

5 · Cómo se decide la relevancia

No es una decisión estadística. Las vías habituales:

Diferencia mínima clínicamente importante. En salud se define de antemano cuánto tiene que mejorar un indicador para que valga la pena el tratamiento, y se compara el intervalo contra ese umbral.

Costo-beneficio. Un efecto chico en una intervención barata y masiva puede valer más que uno grande en una intervención cara.

Comparación con lo conocido. Un $d$ de 0,3 es notable si los tratamientos existentes logran 0,1.

En unidades interpretables. “$291.750 mensuales”, “3 días menos de internación”, “2,6 puntos porcentuales”.

6 · Cómo redactarlo

✗ "Se encontraron diferencias significativas entre grupos (p < 0,001)."

✓ "Los varones declararon ingresos $291.750 mayores que las mujeres
   (IC 95 %: $261.268 a $322.232; d = 0,29; p < 0,001). La diferencia es
   nítida a nivel poblacional aunque las distribuciones se superponen
   ampliamente."

7 · Errores frecuentes

• Usar “significativo” sin aclarar que es en sentido estadístico.
• Concluir relevancia desde el valor p.
• Concluir ausencia de efecto desde un no significativo sin mirar el intervalo ni la potencia.
• Reportar solo el valor p.
• Aplicar los umbrales de Cohen como si fueran una medida de importancia.
• Ignorar la dirección práctica. Un efecto significativo en el sentido contrario al esperado es un hallazgo, no un fracaso.

@misc{estadistica_ar_significacion_y_relevancia,
  author       = {Montivero, Jorge Luis},
  title        = {{Significación estadística y relevancia práctica}},
  year         = {2026},
  howpublished = {\url{https://estadistica.ar/conceptos/significacion-y-relevancia}},
  note         = {estadistica.ar. Consultado el \today},
  urldate      = {2026-09-18}
}