¿Se utiliza la revisión por pares para suprimir los hallazgos científicos?

Algunas personas descontentas ciertamente piensan que sí. y es posible que muchas revistas científicas utilicen revisores que “van con la corriente principal”. Pero:

Muchas ideas nuevas y emocionantes salen a la luz y conducen a cambios importantes en la comprensión. En mi experiencia, muchos revisores y editores miran algo y piensan que está mal, pero como no tiene fallas metodológicas, vamos con eso. Y a las revistas les gusta una buena controversia: aumenta el número de lectores y las citas.

Como editor, he visto algunas críticas negativas, pobres en el sentido de que quieren que las cosas sean rechazadas porque no están de acuerdo con ello, pero no dan buenas razones, solo saludan con la mano. Podemos detectar esto y descontarlo. Cuando recibimos críticas muy diferentes, pedimos más a las personas no asociadas con el primer lote.

Ninguna revista está obligada a publicar todo lo que se ofrece. Esto no es censura; siempre puedes intentarlo en otro lugar, o en la era digital de auto-publicación. Sin una revisión / decisiones editoriales, estaríamos inundados de mentiras y se acumularían más artículos que señalaran por qué otros fueron una mierda.

En la práctica, las revisiones a menudo señalan fallas menores en un documento. Los autores lo mejoran y todos nos beneficiamos.

Hay tres razones principales para el rechazo.

  1. Es simplemente irremediablemente defectuoso en los métodos. Los resultados no justifican las conclusiones extraídas de ellos.
  2. Está mal construido en términos de lenguaje y lógica, y los autores se han negado o han sido incapaces de mejorarlo (para ser claros, paso mucho tiempo tratando cuestiones lingüísticas en documentos que valen la pena; no todos tenemos el beneficio de inglés como nuestro primer idioma).
  3. El trabajo es demasiado trivial o demasiado aburrido. Este es un factor importante en las revistas de alto rango que obtienen muchas más presentaciones de las que posiblemente pueden publicar. Tiene que haber alguna evaluación. Ciertamente es en parte subjetivo; depende de una evaluación de cuántas personas lo encontrarán interesante / útil.

Con el aumento de las revistas “depredadoras” que publicarán cualquier cosa si les paga, la cantidad de mentiras ha aumentado. Esto no le hace ningún favor a nadie.

No.

Después de haber leído una gran cantidad de artículos científicos relacionados con el ruido y la salud de las turbinas eólicas, por nombrar un campo, haber revisado un par de revisiones sistémicas importantes, haber realizado una revisión sistémica personal y similares, en realidad es bastante fácil para la ciencia de la basura publicarse , incluso si está en un diario más horrible.

La revisión por pares es mejor cuanto mayor sea el impacto, más prestigiosa es la revista. Nature publica menos basura que un profesor asociado de estudios interdisciplinarios de la revista para mascotas de la Universidad de Toronto o la revista dirigida a médicos de familia canadienses o la revista estadounidense que está en la intersección del ruido y la salud (tres ejemplos específicos en los que estoy pensando).

Pero hay muchas revistas. Los estudios y los artículos basura se publican en revistas ‘revisadas por pares’ todo el tiempo. La mayoría de las veces se hunden sin dejar rastro, excepto aquellos que son útiles para ser aprovechados por grupos de defensa extraños como los que luchan contra los parques eólicos.

Willie Soon logró publicar sus opiniones sin sentido sobre el cambio climático. Andrew Wakefield logró publicar su perjudicial BS anti-vaxx. Martin Fleischman publicó su trabajo de fusión en frío junto con todo su buen trabajo.

La revisión por pares es solo uno de los primeros filtros para la ciencia. Otra es la revisión crítica y la replicación, que la mayoría de la gente no hará sin algo realmente publicado. Luego, las revisiones sistémicas y los metanálisis son otro filtro (pista: las publicaciones que vinculan los parques eólicos con los efectos adversos para la salud fallaron por completo en la revisión sistémica).

La revisión por pares es como un filtro para filtrar los documentos / propuestas que parecerían más prometedores e interesantes para una comunidad más grande de investigadores. Por lo tanto, es posible que algunos hallazgos, aunque sean notables en sí mismos pero no sean interesantes para muchas personas, no sean aceptados. Sin embargo, el rechazo en una revista / conferencia no significa que el trabajo no será aceptado por otra revista o conferencia en el mismo campo, aunque quizás esté un poco más bajo. No estoy hablando de revistas o conferencias que no valga la pena ver.

Esto no necesita ser considerado “supresión” sino más bien hacer una elección. Sin embargo, también hay casos en los que las propuestas se rechazan solo para que las vuelva a enviar alguien en el panel y se aprueben en su nombre. Es difícil encontrar ejemplos de esto, pero sucede. Esto puede considerarse “supresión” de los esfuerzos del proponente original, no necesariamente de ideas. Al igual que con cualquier otro sistema, la revisión por pares tiene sus propias limitaciones, pero tiene algún propósito y, en su ausencia, su aceptación / rechazo de los hallazgos científicos puede terminar dependiendo de las tendencias populistas. La revisión por pares al menos sigue un buen grado de enfoque científico al aceptar o rechazar (no necesariamente suprimir) ideas / hallazgos.

A2A

Quizás, pero ¿puedes pensar en una alternativa factible que también asegure la calidad y credibilidad de los trabajos publicados? No hay soluciones perfectas en este mundo, pero la revisión por pares generalmente sirve como un guardián necesario para una beca de calidad.

A veces lo es. No es una característica prevista en el diseño del proceso, sino un resultado secundario de las métricas subjetivas empleadas por pares sesgados (a menudo debido a la falta de buena definición, aplicación y seguimiento responsable de conflictos de intereses).

En este momento tengo dos documentos científicos en mi escritorio, para revisión solicitados por Physical Review. Los rechazaré (¿”suprimiré”?) Si

  1. son basura, haciendo afirmaciones de que no corroboran datos o análisis
  2. no digas nada no conocido
  3. escrito tan mal que no puedo entenderlos (pero generalmente trato de ayudar a enderezar el idioma en un primer intento).

Nunca rechacé un artículo porque no me gustó la conclusión. No sé de ningún científico que rechazaría sobre esa base.

No, es para suprimir BS sin fundamento que se llaman hallazgos científicos. Si es real, resistirá la revisión por pares.