Nota estadística

Potencia estadística de una investigación médica. ¿Qué postura tomar cuando los resultados de la investigación no son significativos?

C. Carazo-Díaz, L. Prieto-Valiente [REV NEUROL 2024;79:143-145] PMID: 39207129 DOI: https://doi.org/10.33588/rn.7905.2024099 OPEN ACCESS
Volumen 79 | Número 05 | Nº de lecturas del artículo 1.496 | Nº de descargas del PDF 80 | Fecha de publicación del artículo 01/09/2024
Icono-PDF-OFF Descarga PDF Castellano Citación Buscar en PubMed
Compartir en: Facebook Twitter
Ir a otro artículo del número
RESUMEN Artículo en español English version
La idea original de rechazar estudios con baja potencia y autorizarlos si es suficientemente alta es razonable e incluso obligada, aunque en la práctica este razonamiento se ve muy limitado por el hecho de que la potencia de un estudio depende de varios factores y, por tanto, no es única. Además, no hay un valor frontera que separe los valores ‘altos’ de potencia de los ‘bajos’. Pese a esto, una vez realizado el estudio, si su resultado es muy significativo, no tiene sentido preguntarnos por la potencia que tenía. Sólo cabe aprovechar su resultado. Consideración aparte merece el caso en que dicho resultado no sea estadísticamente significativo. Entonces sí puede ser pertinente considerar su potencia. A continuación, se hace una reflexión sobre qué postura adoptar en estos casos y se muestra que, para sacar conclusiones razonables sobre el efecto poblacional, el cálculo de su intervalo de confianza es más útil que el cálculo de la potencia y su interpretación más fácilmente entendible por el médico sin formación en análisis estadístico. Palabras claveDesviación estándarEfecto realInferencia estadísticaInvestigación médicaPotencia estadísticaValor de p
TEXTO COMPLETO (solo disponible en lengua castellana / Only available in Spanish)

Introducción


Aunque la idea original de rechazar estudios con baja potencia y autorizarlos si es alta es razonable e incluso obligada, en la práctica es de escasa utilidad, porque la potencia de un estudio no es única; depende de varios parámetros, que, tomando valores un poco diferentes, pueden dan lugar a potencias muy distintas. Para estimar la potencia de un estudio, lo ideal sería elaborar una tabla con las potencias correspondientes a distintos valores de estos parámetros dentro de una horquilla razonable [1]. Cuando, por ejemplo, las potencias calculadas están todas en torno al 20%, quiere decir que, si en realidad existe el efecto que la investigación está buscando, la probabilidad de encontrar valor de p del test suficientemente pequeño es baja. Si las potencias calculadas están en torno al 85%, por ejemplo, es muy probable obtener ese valor de p [1]. No obstante, no debemos olvidar que no existe ningún criterio ‘matemático’ ni ‘científico’ que justifique decidir un valor frontera que marque la separación entre los valores aceptables de potencia y los que no lo son.

Si un estudio ya realizado ha mostrado un valor de p muy pequeño, no tiene sentido preguntar por la potencia que tenía ese estudio antes de realizarlo. El hecho de tener un valor de p muy pequeño nos lleva a rechazar la hipótesis nula y concluir, por ejemplo, que el fármaco que estamos investigando es más efectivo que el placebo, independientemente de cuál fuera su potencia previa [2,3]. Consideración aparte merece el caso en que el resultado del estudio no sea estadísticamente significativo.
 

Qué postura tomar, según su potencia, tras hacer un estudio con resultado no significativo


Si el estudio que compara la eficacia de un fármaco frente a la del placebo da resultado no significativo, el valor de la potencia antes de realizarlo puede tener implicaciones lógicas bien definidas.

Para ayudarnos a entender la lógica del razonamiento, retomamos el ejemplo en el que, al terminar un largo paseo por Central Park, caemos en la cuenta de que probablemente en él, pero no sabemos en qué punto, hemos perdido una valiosa joya. A la mañana siguiente nos disponemos a buscarla [3]. Reproducimos aquí de nuevo la situación para que el lector tenga presente toda la información que necesita. Dado el gran tamaño del parque, si la búsqueda la hace una sola persona, la probabilidad de encontrar la joya es muy pequeña. Esa acción tiene ‘poca potencia’ y se desaconseja. Si colaboran n = 20 personas, esa probabilidad es mayor, y, si colaboran n = 200 personas, es mucho mayor. Si usted no tiene recursos para contratar más personas y decide ir solo a buscarla, está claro que tiene una muy pequeña probabilidad de encontrarla. Pero, si a pesar de ello va solo y encuentra la joya, no podemos cuestionar el resultado alegando que su acción tenía poca potencia. Una vez realizado, si ha habido éxito, solo cabe celebrarlo y aprovechar su resultado.

Ahora consideramos el caso en que el resultado de la investigación es negativo, es decir, no aparece la joya, para ver cómo interpretamos ese resultado ‘negativo’ según sea alta o baja la potencia.

Si fueron a buscarla 100 personas, era muy alta la probabilidad de encontrarla si está allí. Por ello, si no la encuentran, sospechamos que no está allí.

Pero si va una sola persona y no la encuentra, no haberla encontrado es totalmente compatible con la posibilidad de que esté allí. Por ello, si no la encuentra, aún pensamos que puede estar allí [4].

Merece la pena insistir en este razonamiento con otro ejemplo que nos ayude a ver cómo concluimos cuando el resultado es negativo y según que la potencia fuera grande o pequeña. Los estudios geológicos indican que probablemente hay una bolsa de petróleo de gran valor a unos 80 metros bajo el suelo de mi huerto. Si un investigador propone hacer una prospección con una sonda de 75 m, pensamos que, si el petróleo está allí, la probabilidad de encontrarlo es baja (modesta potencia). Si hace la prospección con esa sonda de 75 m y no encuentra petróleo, aún pensamos que puede estar allí.

Si otro investigador informa de que hizo una prospección con una sonda de 100 m y no encontró petróleo, sospechamos que no hay tal bolsa de petróleo. Equivale al ejemplo de la joya perdida, en que van muchas personas a buscarla (acción de alta potencia) y no aparece. Ello nos hace pensar que la joya no está en ese parque, porque si estuviera era muy probable que la hubieran encontrado.

Para ver este mismo razonamiento lógico en la investigación médica, volvemos a usar un ejemplo de Prieto-Valiente y Carazo-Díaz [3]: en un estudio destinado a indagar si el fármaco ‘F’ modifica los niveles en sangre del neurotransmisor ‘N12’, mediremos el nivel de N12 en cada individuo de dos muestras, tratamiento y placebo, de tamaño N.

Si hacemos el estudio con n = 20 y encontramos el resultado ilustrado en la tabla, tenemos un valor de p grande y no hay evidencia a favor de que el fármaco tiene el efecto en cuestión. Los datos son claramente compatibles con que no haya efecto. El intervalo de confianza para el efecto poblacional nos dice que el efecto real (en población) podría ser desde bajar en torno a siete unidades la media poblacional hasta subirla en 15 unidades.

Veamos si el cálculo de la potencia del estudio aporta información útil. Si tenemos motivos para estimar que la desviación, σ, es en torno a 17 y aspiramos a tener un valor de p < 0,05, con la fórmula pertinente encontramos que con n = 20 en cada grupo, si el efecto real es aumentar la media poblacional en 24 unidades, la potencia es del 99%. Es decir, si el efecto real fuera en torno a 24, era muy probable que apareciera un valor de p < 0,05, por lo que no haberlo obtenido sugiere que el efecto real no es 24 [5]. Es equivalente a ‘si buscan la joya 100 personas y no la encuentran, sospechamos que no está allí’. Nótese que, viendo el intervalo de confianza, también asumíamos que el efecto real no era aumentar 24 unidades.

Pero si proponemos como posible efecto real que el fármaco aumenta la media poblacional en tres unidades, con n = 20 en cada grupo, la potencia es 0,08. Es decir, la probabilidad de encontrar p < 0,05 es solo del 8%. Por ello, al encontrar un valor de p grande aún pensamos que podría haber ese efecto real de aumento de tres unidades. Es equivalente a ‘si busca la joya una persona y no la encuentra, aún pensamos que puede estar allí’. Nótese que, viendo el intervalo de confianza en la tabla, también asumíamos que el efecto real puede ser que la media aumenta tres unidades.
 

Conclusión


La estimación de la potencia para posibles valores del efecto poblacional no añade información relevante a la que proporciona el intervalo de confianza. Es decir, se llega a las mismas conclusiones observando el intervalo de confianza para el efecto poblacional que proponiendo posibles valores para el efecto real y descartándolos o aceptándolos, según como fuera la potencia asociada a ellos. Por ello, y por ser un concepto más difícilmente aprehensible para el médico no versado en estadística, el cálculo de la potencia estadística aporta poco en la investigación médica en la mayoría de los casos. La buena noticia es que el intervalo de confianza aporta información equivalente y es mucho más fácilmente entendible por el investigador no versado en inferencia estadística.

 

Bibliografía
 


 1. Norton BJ, Strube MJ. Understanding statistical power. J Orthop Sports Phys Ther 2001; 31: 307-15.

 2. Greenland S, Senn SJ, Rothman KJ, Carlin JB, Poole C, Goodman SN, et al. Statistical tests, P values, confidence intervals, and power: a guide to misinterpretations. Eur J Epidemiol 2016; 31: 337-50.

 3. Prieto-Valiente L, Carazo-Díaz C. Potencia estadística en investigación médica. ¿Qué postura tomar cuando los resultados de la investigación son significativos? Rev Neurol 2023; 77: 171.

 4. Prieto L. Errores más frecuentes al elaborar conclusiones en trabajos científicos. Fisiología 2003; 6: 4-5.

 5. Tsang R, Colley L, Lynd LD. Inadequate statistical power to detect clinically significant differences in adverse event rates in randomized controlled trials. J Clin Epidemiol 2009; 62: 609-16.

 

Statistical power in medical research. What position should be taken when research results are not significant?


Abstract. The original idea of rejecting studies with low power and authorising them if their power is sufficiently high is reasonable and even an obligation, although in practice this reasoning is heavily constrained by the fact that the power of a study depends on several factors, rather than a single one. Furthermore, there is no threshold separating ‘high’ power values from ‘low’ power values’. However, if the result is very significant, considering how powerful it was it makes little sense after the study has been carried out. It is only possible to take advantage of the result. Situations in which this result is not statistically significant warrant further consideration. Consideration of the power may be useful in these circumstances. This article focuses on the position that should be adopted in these cases, and it shows that in order to draw reasonable conclusions about the effect size of the population, calculating the confidence interval is more useful than calculating the power, and its interpretation is more easily understood by physicians who lack training in statistical analysis.

Key words. Medical research. p-value. Real effect. Standard deviation. Statistical inference. Statistical power.
 

 

© 2024 Revista de Neurología

Si ya es un usuario registrado en Neurologia, introduzca sus datos de inicio de sesión.


Rellene los campos para registrarse en Neurologia.com y acceder a todos nuestros artículos de forma gratuita
Datos básicos
He leído y acepto la política de privacidad y el aviso legal
Seleccione la casilla si desea recibir el número quincenal de Revista de Neurología por correo electrónico. De forma quincenal se le mandará un correo con los títulos de los artículos publicados en Revista de Neurología.
Seleccione la casilla si desea recibir el boletín semanal de Revista de Neurología por correo electrónico. El boletín semanal es una selección de las noticias publicadas diariamente en Revista de Neurología.
Seleccione la casilla si desea recibir información general de neurologia.com (Entrevistas, nuevos cursos de formación, eventos, etc.)
Datos complementarios

Se os solicita los datos de redes para dar repercusión por estos medios a las publicaciones en las que usted participe.

En cumplimiento de la Ley 34/2002, de 11 de julio, de Servicios de la Sociedad de la Información y de Comercio Electrónico (LSSI-CE), EVIDENZE HEALTH ESPAÑA, S.L.U. se compromete a proteger la privacidad de sus datos personales y a no emplearlos para fines no éticos.

El usuario otorga su consentimiento al tratamiento automatizado de los datos incluidos en el formulario, así como a que EVIDENZE HEALTH ESPAÑA S.L.U comparta sus datos con partners, socios y colaboradores comerciales de EVIDENZE que pudieran estar fuera de la Unión Europea, de acuerdo con la información contenida en la política de privacidad del Sitio. Los datos facilitados se tratarán siempre con la máxima confidencialidad, salvaguardando su privacidad.

Usted tiene derecho a rectificar sus datos personales en cualquier momento informándolo a soporte_fmcneuro@neurologia.com. También se le informa de la posibilidad de ejercitar el derecho de cancelación de los datos personales comunicados.



¡CONVIÉRTASE EN USUARIO PREMIUM DE NEUROLOGIA.COM!

Además, por convertirte en usuario premium, recibirá las siguientes ventajas:

  • Plaza asegurada en todos nuestros Másteres (www.ineurocampus.com)
  • Descuento del 5% en los cursos de “Actualización en Neurología”, la FMC que estará disponible próximamente en la web.
  • Descarga gratuita en formato PDF dos de las obras con más éxito publicadas por Viguera Editores:
    • Oromotors Disorders in childhood (M. Roig-Quilis; L. Pennington)
    • Manual de Neuropsicología 2ª ed. (J. Tirapu-Ustárroz; M. Ríos-Lago; F. Maestú)

El precio para hacerse Premium durante el periodo de un año es de 5€, que podrá pagar a continuación a través de una pasarela de pago seguro con tarjeta de crédito, transferencia bancaria o PayPal:

QUIERO HACERME PREMIUM

No deseo hacerme premium


QUIERO MATRICULARME

No deseo matricularme


Estimado usuario de Revista de Neurología,

Debido a la reciente fusión por absorción de VIGUERA EDITORES, S.L.U., la entidad gestora de las publicaciones de Viguera Editores, entre ellas, Revista de Neurología, por EVIDENZE HEALTH ESPAÑA, S.L.U., una de las sociedades también pertenecientes al Grupo Evidenze, y con la finalidad de que Usted pueda seguir disfrutando de los contenidos y distintos boletines a los que está suscrito en la página web de neurologia.com, es imprescindible que revise la nueva política de privacidad y nos confirme la autorización de la cesión de sus datos.

Para dar su consentimiento a seguir recibiendo la revista y los boletines* de neurologia.com vía correo electrónico y confirmar la aceptación de la nueva política de privacidad, así como la cesión de sus datos a Evidenze Health España S.L.U., el resto de las entidades del Grupo Evidenze y sus partners y colaboradores comerciales, incluyendo la posibilidad de llevar a cabo transferencias internacionales a colaboradores extranjeros, pulse en el siguiente enlace:

ACEPTAR

Cancelar

*Los usuarios que no confirmen su aceptación a través del botón dejarán de recibir la revista y los boletines. Le recordamos que puede gestionar sus suscripciones desde el menú “Suscripciones y consentimiento” de la “Zona de Usuario” en la página web www.neurologia.com

Atentamente

El equipo de Revista de Neurología