¿Cuál es la mejor manera de aprender a leer eficazmente artículos científicos (sin ser víctima de malas ciencias o prejuicios)?

Ir a la escuela de posgrado. Punto final.

Usted aprende a evaluar los documentos leyendo y discutiendo muchos (muchos, muchos lotes) de artículos publicados con su mentor y compañeros de estudios, luego revisando los documentos bajo la supervisión de su mentor y finalmente escribiendo sus propios documentos. Solo cuando comienzas a publicar tu propio trabajo puedes apreciar completamente las decisiones (buenas y malas) tomadas por otros autores.

No puede aplicar una lista de verificación de dominio no específico para detectar ciencia errónea. Ayudé a rechazar docenas de artículos que estaban perfectamente bien escritos, tenían procedimientos de prueba adecuados, suficiente aparato matemático … y estaban presentando resultados para una pregunta poco interesante. Si no conoce el campo, no sabe lo que es interesante.

También puedo recordar un cierto papel que fue más o menos un incendio en un contenedor de basura. El par de pruebas ofrecidas no tenían sentido y si la memoria sirve no había resultados experimentales en absoluto. Ha sido citado 888 veces (y media docena de veces por mí). Su resultado fue correcto y fundamental, y el primero en salir. Entonces, a pesar de las fallas en el documento, es el que se cita. Si estuviera leyendo ese documento sin conocimiento específico del dominio, cometería el error de archivarlo bajo “mala ciencia”.


Dicho todo esto, un laico puede aprender a identificar papeles de manivela con un grado de precisión moderadamente alto, y usted puede mejorar su índice de aciertos al pasar el rato con personas que ensartan este tipo de papeles por diversión. El grupo usenet talk.origins todavía está poblado por científicos subempleados y jubilados que comentan regularmente sobre publicaciones creacionistas. Puedes aprender mucho escuchando allí (“Ven por la ciencia, quédate por las cascadas de juegos de palabras …”). Ben Goldacre sigue haciendo comentarios sobre basura médica y ciencia de la nutrición (Bad Science). Bruce Schneier sigue escribiendo sobre investigaciones de seguridad falsas (Schneier sobre seguridad). Scott Aaronson maneja la computación cuántica y la prueba de complejidad (Shtetl-Optimized). Phil Plait hace todo el espacio (Bad Astronomy de Phil Plait: Página de inicio). Y sigue y sigue y sigue.

Los bromistas también saben cómo escribir blogs, pero una lista de verificación puede ser un poco más útil aquí. ¿La persona comenta sobre su área de especialización? ¿Están trabajando en una institución convencional? ¿Están publicando en los principales medios de comunicación de los que has oído hablar? Eso no atrapará todas las manivelas, pero eliminará la mayoría de ellas.

  • Conviértete en investigador. Esta no es una opción para todos, pero ser un estudiante de investigación de posgrado en lugar de una licenciatura significa que debe usar la literatura publicada en lugar de solo citarla o sintetizarla, por lo que tiene más interés en si funciona y tiene sentido. Aquí es donde la mayoría de los investigadores realmente comienzan a aprender la evaluación crítica.

(Imagen bajo la licencia internacional Creative Commons Attribution-Share Alike 4.0 de Ilkasan 02, a través del archivo: Молодые ученые в науке.jpg)

  • Asistir o leer clubes de revistas. En parte, ser investigador es un buen entrenamiento porque los laboratorios de investigación organizan clubes de revistas regulares, en los que se presentan y luego se discuten uno o dos artículos publicados, ¡y a veces se rompen! Algunos de estos se hacen públicos, como en PubMed Commons. [1]

(Imagen a través del club de lucha de jabón)

  • Cómo leer un documento. La serie de artículos de Trish Greenhalgh Cómo leer un papel en el BMJ [2] es una gran guía de artículos médicos. Leí estos (y su libro del mismo nombre) cuando comencé como editor en las revistas de la serie BMC .

  • Pautas de informes. Otro truco del editor es utilizar pautas de informes, como las de la Red EQUATOR en ciencias clínicas [3] o FAIRsharing (anteriormente Biosharing). [4] Estos muestran qué información debe esperar de un diseño de estudio en particular y le permiten leer el artículo de manera estructurada.

(Tabla de Schulz KF, Altman DG, Moher D, para el Grupo CONSORT (2010) Declaración CONSORT 2010: Pautas actualizadas para informar ensayos aleatorizados grupales paralelos. PLOS Med 7 (3): e1000251. Doi: 10.1371 / journal.pmed.1000251 , bajo la licencia Creative Commons Attribution License)

  • Lea los métodos primero. Intente leer primero la sección de métodos para evitar centrarse en las conclusiones; tendrás una idea más clara de lo que hicieron para obtener esos resultados. Si el artículo se basa en artículos anteriores para sus métodos o teoría, lea esos artículos también.

(Ver “Y luego ocurre un milagro” por Sidney Harris en Science Cartoons Plus – The Cartoons of S. Harris)

Notas al pie

[1] PubMed Commons – Clubes de revistas

[2] Greenhalgh t [au] bmj [jo] (papel [ti] O papeles [ti])

[3] Mejora de la calidad y la transparencia de la investigación en salud

[4] FAIRsharing