¿Cómo se puede mejorar la calidad de la investigación científica publicada en los Estados Unidos?

Realmente no quieres hacer eso.

Comencemos por limitar el número de lugares de publicación. Luego limitaremos el número de envíos que cualquier investigación puede hacer en un año calendario. Y limitaremos cuántas presentaciones pueden publicar esos lugares. En aras de la discusión, ahora solo hay una revista en cada campo, publica cien artículos por año, y solo puede enviarle un artículo escrito o coautor al año.

Por supuesto, las decisiones de contratación, promoción y tenencia aún se basarán en su registro de publicación.

La calidad irá por las nubes. No es inusual que presente una docena de artículos por año. Ahora todo ese esfuerzo se centrará en un solo documento. Estaré haciendo más experimentos, análisis más sofisticados, creando mejores modelos y construyendo palabras hasta que el texto brille positivamente.

El resultado será la productividad científica cayendo por un precipicio.

El modelo de publicación actual maximiza la publicación de ideas. La mayoría de esas ideas no son interesantes, y la mayoría de los artículos están mal escritos, tienen experimentos inadecuados, etc.

Y eso está bien. Las buenas ideas (la mayoría de las veces) saldrán a la superficie y serán citadas con mayor frecuencia. Me gusta que ese filtro suceda después de la publicación, en lugar de antes.

Intentar elevar la calidad promedio de las publicaciones necesariamente resultará en menos publicaciones, y eso a su vez resultará en que al menos algunas buenas ideas se retrasen o no se publiquen en absoluto.

Creo que una mejor pregunta es cómo facilitar la publicación. Necesitamos lugares que publiquen resultados negativos y resultados de la replicación de experimentos. En mi campo, necesitamos crear una expectativa de que el código fuente y los conjuntos de datos también se publiquen, y hacer que publicar y archivar esos elementos sea lo más sencillo posible.

Avanzaré en lo que dice Barry. Existe la creencia de que sabemos, al escribir o leer, qué trabajo será influyente. Lo que llevará a alguna parte. De hecho, el impacto de cualquier publicación individual no se puede conocer en su publicación. Algunas investigaciones que se consideran de vital importancia en el momento de la publicación resultarán sin sentido; La investigación que muestra la prueba de vida en Marte a través de meteoritos encontrados en el Ártico (¿o fue la Antártida?) resultó ser defectuosa. Algunos trabajos que la gente piensa que podrían estar equivocados resultan vitales (cf. Michelson y Morley). Algunos trabajos correctos pueden ser ignorados (Mendel).

Además, empujaría a las personas a cometer fraude al insistir en que los resultados cumplan con cierta medida de importancia. El fraude no es actualmente un gran problema (lo suficientemente grande) porque el incentivo es relativamente bajo y el riesgo muy alto. Haga que el incentivo sea alto (necesita importancia para publicar) y el riesgo bajo (también podría serlo, si falla como investigador de todos modos porque no publica), entonces se volverá común.