Sesgo de publicación

En la investigación académica publicada , el sesgo de publicación ocurre cuando el resultado de un experimento o estudio de investigación influye en la decisión de publicarlo o distribuirlo de otra manera. Publicar solo los resultados que muestran un hallazgo significativo altera el equilibrio de los hallazgos a favor de los resultados positivos. ^{[ 1 ]} El estudio del sesgo de publicación es un tema importante en la metaciencia .

A pesar de una calidad de ejecución y diseño similar , ^{[ 2 ]} los artículos con resultados estadísticamente significativos tienen tres veces más probabilidades de ser publicados que aquellos con resultados nulos . ^{[ 3 ]} Esto motiva indebidamente a los investigadores a manipular sus prácticas para asegurar resultados estadísticamente significativos, como por ejemplo mediante la manipulación de datos . ^{[ 4 ]}

Muchos factores contribuyen al sesgo de publicación. ^{[ 5 ] [ 6 ]} Por ejemplo, una vez que un hallazgo científico está bien establecido, puede volverse noticia publicar artículos confiables que no rechacen la hipótesis nula . ^{[ 7 ]} Lo más común es que los investigadores simplemente se nieguen a enviar resultados, lo que lleva a un sesgo de no respuesta . Los investigadores también pueden asumir que cometieron un error, encontrar que el resultado nulo no respalda un hallazgo conocido, perder interés en el tema o anticipar que a otros no les interesarán los resultados nulos. ^{[ 2 ]}

Los intentos de encontrar estudios no publicados a menudo resultan difíciles o insatisfactorios. ^{[ 5 ]} En un esfuerzo por combatir este problema, algunas revistas exigen que los autores registren previamente sus métodos y análisis, antes de recopilar datos, con organizaciones como el Center for Open Science .

Otras estrategias propuestas para detectar y controlar el sesgo de publicación ^{[ 5 ]} incluyen el análisis de la curva p ^{[ 8 ]} y la desfavorecer los estudios pequeños y no aleatorizados debido a su alta susceptibilidad al error y al sesgo. ^{[ 2 ]}

El sesgo de publicación se produce cuando la publicación de los resultados de una investigación depende no solo de la calidad de la investigación, sino también de la hipótesis probada y de la significancia y dirección de los efectos detectados. ^{[ 9 ]} El tema fue tratado por primera vez en 1959 por el estadístico Theodore Sterling para referirse a campos en los que es más probable que se publiquen las investigaciones "exitosas". Como resultado, "la literatura de dicho campo consiste en gran parte en conclusiones falsas derivadas de errores de primer tipo en las pruebas estadísticas de significancia". ^{[ 10 ]} En el peor de los casos, las conclusiones falsas podrían llegar a considerarse verdaderas si la tasa de publicación de resultados negativos es demasiado baja. ^{[ 11 ]}

Un efecto del sesgo de publicación se conoce a veces como el efecto del cajón de archivo o problema del cajón de archivo . Este término sugiere que los resultados negativos, aquellos que no respaldan las hipótesis iniciales de los investigadores, suelen ser archivados y no pasan de los cajones de archivo de los investigadores, lo que genera un sesgo en la investigación publicada. ^{[ 12 ] [ 13 ]} El término «problema del cajón de archivo» fue acuñado por el psicólogo Robert Rosenthal en 1979. ^{[ 14 ]}

El sesgo de resultados positivos, un tipo de sesgo de publicación, ocurre cuando los autores son más propensos a enviar, o los editores a aceptar, resultados positivos que resultados negativos o no concluyentes. ^{[ 15 ]} El sesgo de notificación de resultados ocurre cuando se miden y analizan múltiples resultados, pero la notificación de estos resultados depende de la fuerza y ​​la dirección de los mismos. Un término genérico acuñado para describir estas decisiones post hoc es HARKing ("Hipnotizar después de conocer los resultados"). ^{[ 16 ]}

En el campo biomédico, existe una extensa metainvestigación sobre el sesgo de publicación. Los investigadores que siguieron los ensayos clínicos desde la presentación de sus protocolos a los comités de ética (o autoridades reguladoras) hasta la publicación de sus resultados observaron que aquellos con resultados positivos tienen mayor probabilidad de ser publicados. Esto se ha constatado en múltiples estudios. ^{[ 18 ] [ 19 ] [ 20 ]}

Además, al comparar los protocolos de estudio con los artículos publicados, la investigación ha demostrado que los estudios a menudo no informan los resultados negativos cuando se publican. ^{[ 21 ] [ 22 ]}

También se ha investigado la presencia de sesgo de publicación en metaanálisis . El análisis más extenso de este tipo examinó revisiones sistemáticas de tratamientos médicos de la Biblioteca Cochrane . ^{[ 23 ]} El estudio mostró que los hallazgos estadísticamente significativos tienen un 27 % más de probabilidades de ser incluidos en metaanálisis de eficacia que otros hallazgos. Además, los resultados que no muestran evidencia de efectos adversos tienen un 78 % más de probabilidades de ser incluidos en estudios de seguridad que los resultados estadísticamente significativos que sí muestran efectos adversos. Se encontró evidencia de sesgo de publicación en metaanálisis publicados en revistas médicas destacadas. ^{[ 24 ]}

También se han realizado metaanálisis en el campo de la ecología y la biología ambiental. En un estudio de 100 metaanálisis en ecología, solo el 49 % evaluó el sesgo de publicación. ^{[ 25 ]} Si bien se han desarrollado múltiples pruebas para detectar el sesgo de publicación, la mayoría presenta un rendimiento deficiente en el campo de la ecología debido a los altos niveles de heterogeneidad en los datos y a que, a menudo, las observaciones no son completamente independientes. ^{[ 26 ]}

Una revisión de los resultados publicados sobre el tratamiento con acupuntura encontró que, hasta 1998, "Ningún ensayo publicado en China o Rusia/URSS encontró que un tratamiento de prueba fuera ineficaz". ^{[ 27 ]}

Cuando existe sesgo de publicación, los estudios publicados dejan de ser una muestra representativa de la evidencia disponible. Este sesgo distorsiona los resultados de los metaanálisis y las revisiones sistemáticas . Por ejemplo, la medicina basada en la evidencia depende cada vez más del metaanálisis para evaluar la evidencia.

Los metaanálisis y las revisiones sistemáticas pueden tener en cuenta el sesgo de publicación al incluir evidencia de estudios no publicados y la literatura gris. La presencia de sesgo de publicación también puede explorarse mediante la construcción de un gráfico de embudo en el que la estimación del tamaño del efecto informado se representa frente a una medida de precisión o tamaño de la muestra. La premisa es que la dispersión de los puntos debería reflejar una forma de embudo, lo que indica que la notificación de los tamaños del efecto no está relacionada con su significación estadística. ^{[ 29 ]} Sin embargo, cuando los estudios pequeños se inclinan predominantemente en una dirección (generalmente la dirección de los tamaños del efecto mayores), se producirá una asimetría que puede ser indicativa de sesgo de publicación. ^{[ 30 ]}

Debido a que existe un grado inevitable de subjetividad en la interpretación de los gráficos de embudo, se han propuesto varias pruebas para detectar la asimetría de dichos gráficos. ^{[ 29 ] [ 31 ] [ 32 ]} Estas pruebas suelen basarse en la regresión lineal, incluyendo la popular prueba de regresión de Eggers , ^{[ 33 ]} y pueden adoptar un parámetro de dispersión multiplicativo o aditivo para ajustar la presencia de heterogeneidad entre estudios. Algunos enfoques incluso pueden intentar compensar la (posible) presencia de sesgo de publicación, ^{[ 23 ] [ 34 ] [ 35 ]} lo cual es particularmente útil para explorar el impacto potencial en los resultados del metaanálisis. ^{[ 36 ] [ 37 ] [ 38 ]}

En ecología y biología ambiental, un estudio encontró que el sesgo de publicación impactó el tamaño del efecto, la potencia estadística y la magnitud. La prevalencia del sesgo de publicación distorsionó la confianza en los resultados metaanalíticos, con el 66% de las medias metaanalíticas inicialmente estadísticamente significativas que se volvieron no significativas después de corregir el sesgo de publicación. ^{[ 39 ]} Los estudios ecológicos y evolutivos consistentemente tuvieron una potencia estadística baja (15%) con una exageración de los efectos de 4 veces en promedio (tasas de error de tipo M = 4,4).

La presencia de sesgo de publicación puede detectarse mediante pruebas de sesgo de retardo temporal, donde este se produce cuando los efectos mayores o estadísticamente significativos se publican más rápidamente que los efectos menores o no estadísticamente significativos. Puede manifestarse como una disminución en la magnitud del efecto general con el tiempo. La característica clave de las pruebas de sesgo de retardo temporal es que, a medida que se acumulan más estudios, se espera que el tamaño medio del efecto converja hacia su valor real. ^{[ 26 ]}

Dos metaanálisis sobre la eficacia de la reboxetina como antidepresivo demostraron intentos de detectar sesgo de publicación en ensayos clínicos. Basándose en datos positivos de ensayos, la reboxetina se aprobó inicialmente como tratamiento para la depresión en muchos países de Europa y el Reino Unido en 2001 (aunque en la práctica rara vez se utiliza para esta indicación). Un metaanálisis de 2010 concluyó que la reboxetina era ineficaz y que la preponderancia de ensayos con resultados positivos reflejaba un sesgo de publicación, debido principalmente a los ensayos publicados por el fabricante del fármaco, Pfizer . Un metaanálisis posterior, publicado en 2011 y basado en los datos originales, encontró fallos en los análisis de 2010 y sugirió que los datos indicaban que la reboxetina era eficaz en la depresión grave (véase Reboxetina § Eficacia ). Ben Goldacre ^{[ 40 ]} y Peter Wilmshurst ^{[ 41 ]} proporcionan ejemplos de sesgo de publicación .

En las ciencias sociales, un estudio de artículos publicados que exploraban la relación entre el desempeño social y financiero de las empresas encontró que "en las revistas de economía, finanzas y contabilidad, las correlaciones promedio eran solo aproximadamente la mitad de la magnitud de los hallazgos publicados en revistas de gestión de problemas sociales, ética empresarial o negocios y sociedad". ^{[ 42 ]}

Un ejemplo citado como caso de sesgo de publicación es la negativa de The Journal of Personality and Social Psychology (la editorial original del artículo de Bem) a publicar intentos de replicación del trabajo de Bem que afirmaban aportar pruebas de precognición. ^{[ 43 ]}

Un análisis ^{[ 44 ]} que comparó estudios de asociaciones gen-enfermedad originados en China con aquellos originados fuera de China encontró que los realizados dentro del país reportaron una asociación más fuerte y un resultado estadísticamente más significativo. ^{[ 45 ]}

John Ioannidis argumenta que "los supuestos hallazgos de investigación a menudo pueden ser simplemente medidas precisas del sesgo predominante". ^{[ 46 ]} Enumera los siguientes factores como aquellos que hacen que un artículo con un resultado positivo tenga más probabilidades de ingresar a la literatura y suprimen los artículos con resultados negativos:

• Los estudios realizados sobre el terreno tienen tamaños de muestra pequeños.
• Los efectos en un campo tienden a ser más pequeños.
• Existe tanto un mayor número como una menor preselección de las relaciones analizadas.
• Existe una mayor flexibilidad en los diseños, las definiciones, los resultados y los modos de análisis.
• Existen prejuicios (por intereses financieros, políticos o de otro tipo).
• El campo científico está en auge y cada vez hay más equipos científicos que buscan publicar sus trabajos.

Otros factores incluyen el sesgo del experimentador y el sesgo del sombrero blanco .

El sesgo de publicación puede controlarse mediante estudios con mayor potencia estadística, estándares de investigación mejorados y una consideración cuidadosa de las relaciones verdaderas y falsas. ^{[ 46 ]} Los estudios con mayor potencia estadística se refieren a estudios grandes que ofrecen resultados definitivos o prueban conceptos importantes y conducen a un metaanálisis con bajo sesgo. Los estándares de investigación mejorados, como el preregistro de protocolos, el registro de la recopilación de datos y la adhesión a protocolos establecidos, son otras técnicas. Para evitar resultados falsos positivos, el experimentador debe considerar las posibilidades de que esté probando una relación verdadera o falsa. Esto puede hacerse evaluando adecuadamente la probabilidad de informe falso positivo con base en la potencia estadística de la prueba ^{[ 47 ]} y reconfirmando (siempre que sea éticamente aceptable) los hallazgos establecidos de estudios previos que se sabe que tienen un sesgo mínimo.

• Lehrer, Jonah (13 de diciembre de 2010). "La verdad se desvanece" . The New Yorker . Recuperado el 30 de enero de 2020 .
• Registro de ensayos clínicos realizados en los EE. UU. y en todo el mundo, mantenido por la Biblioteca Nacional de Medicina, Bethesda.
• Diccionario del escéptico: sesgo de resultado positivo .
• Diccionario del escéptico: efecto de cajón de archivo .
• Revista de Resultados Negativos en Biomedicina
• Las revistas de resultados completos
• Revista de artículos en apoyo de la hipótesis nula
• Psychfiledrawer.org: Archivo de intentos de replicación en psicología experimental.