¿Qué tan confiable es la naturaleza en comparación con otras revistas?

Una posible medida de fiabilidad es la tasa de retracción. Se podría argumentar que cuanto menor sea la tasa de retracción conocida de la revista, más probable es que un artículo de esa revista resista el escrutinio.

Un estudio reciente de retracciones de 2001 a 2010 encontró que la tasa de retracción se correlacionó bien con el factor de impacto.

Ciencia retraída y el índice de retracción

Para determinar si las revistas difieren en la frecuencia de los artículos retractados y si existe una relación entre la frecuencia de retracción y el factor de impacto de la revista, realizamos una búsqueda en PubMed de artículos retraídos entre 17 revistas con un factor de impacto entre 2.00 y 53.484. Definimos un “índice de retracción” para cada revista como el número de retracciones en el intervalo de tiempo de 2001 a 2010, multiplicado por 1,000, y dividido por el número de artículos publicados con resúmenes. Una gráfica del índice de retracción de la revista versus el factor de impacto reveló una correlación sorprendentemente sólida entre el índice de retracción de la revista y su factor de impacto ( P <0.0001 por la correlación de rango de Spearman) (Fig. 1). Aunque la correlación no implica causalidad, esta investigación preliminar sugiere que la probabilidad de que un artículo publicado en una revista de mayor impacto sea retraído es mayor que la de un artículo publicado en una revista de menor impacto.

(también reportado en NYT: Rise in Scientific Journal Retraction Promsts Calls for Reform)

Según la figura, Nature tiene un índice de retracción más bajo que otras prestigiosas revistas New England Journal of Medicine, Cell, and Science, pero tiene un índice de retracción significativamente más alto que las 13 revistas restantes estudiadas.

Sin embargo, como informa el artículo del NYT, las revistas de mayor impacto tienden a informar sobre trabajos innovadores que es mucho más probable que se analicen detenidamente, lo que podría conducir a una mayor tasa de retracción. Por lo tanto, no está claro que el trabajo de menor impacto sea mucho más confiable. Pero sí parece que las crecientes tensiones del mercado laboral académico pueden estar presionando a los investigadores para que publiquen un trabajo sensacional (que inevitablemente aparece en Nature y compañía) que no se basa adecuadamente en evidencia experimental suficiente.