¿Sería una buena idea reformar la academia con mercados de apuestas sobre afirmaciones científicas?

Si bien los mercados de predicción (por ejemplo, el Proyecto del Buen Juicio) definitivamente pueden agregar valor en la toma de decisiones geopolíticas, prediciendo los resultados de la investigación científica con anticipación

Primero, comparemos con la geopolítica, un reino donde realmente es útil. En el transcurso de cientos de predicciones, surgirán algunos super predictores que generalmente hacen que las predicciones sean mucho más precisas que el promedio. Si el 90% de los pronosticadores más precisos predijeron (digamos) que Europa tendrá otro caso de ébola en los próximos 6 meses, eso podría ser procesable, por ejemplo, las agencias gubernamentales que podrían haber priorizado el problema podrían destinar más recursos a identificar / interceptar pacientes. Pero si el 90% de los expertos en predicciones científicas predijeron que un próximo estudio médico encontraría un tratamiento particular más efectivo contra el Ébola, no creo que sea viable además de publicitar la próxima investigación y aumentar la probabilidad de que los tomadores de decisiones relevantes vean el estudio cuando sale.

Sin embargo, podría ser útil para inversores y empresas farmacéuticas. Si el 90% de los súper pronosticadores pensaran que la gran idea de una startup podría ser aprobada para la fase 4, eso sería extremadamente útil para los inversores (solo ~ 25% de los medicamentos salen vivos de la prueba de la fase 3 y un fracaso en la etapa 3 podría ser de $ 100 millones en costos hundidos). Si una compañía farmacéutica tiene varios candidatos a medicamentos, los resultados alentadores de los pronosticadores podrían ser procesables en términos de asegurar el apoyo ejecutivo para los candidatos más prometedores (?). (Me referiría a alguien mucho más informado sobre cómo las compañías farmacéuticas manejan la asignación de recursos).

Algunos problemas logísticos:

–Poner en marcha este sistema probablemente llevaría décadas. Bien, he analizado los resultados preclínicos y predigo que el medicamento A de Pfizer es tan prometedor que eventualmente llegará al mercado masivo (que generalmente demora ~ 20 años), pero el medicamento B parece inútil. Puedo obtener puntos para una predicción negativa muy pronto si B falla rápidamente, pero solo puedo ganar con una predicción positiva para A en ~ 20 años. En los primeros 5-10 años, creo que sus “super predictores” serán desproporcionadamente bajistas. De hecho, si apuesta a que CADA medicamento falle, parecerá un genio durante mucho tiempo.

–Poner en marcha este sistema probablemente tomaría mucho tiempo y dinero. El tiempo / la experiencia de personas que saben lo suficiente sobre los problemas científicos para convertirse en super predictores probablemente sea costoso, y también tendrá que subsidiar a muchos expertos marginales para encontrar a los super pronosticadores. Además, esto probablemente depende de la disciplina científica, pero en aquellos en los que los hallazgos de la investigación demoran más de 5 años, probablemente necesitará que sus pronosticadores sigan participando durante más de 5 años antes de poder saber quién es un súper pronosticador.

–Este sistema podría terminar sufriendo una fuga de cerebros si / cuando compañías bien financiadas comienzan a cazar furtivamente a tus mejores empleados. Si fuera un VC que trabajara en productos farmacéuticos, me gustaría que sus super predictores me dieran predicciones privadas (para identificar diamantes en bruto) en lugar de hacer predicciones públicas (lo que me quitaría mi ventaja sobre el mercado).

More Interesting

En Estados Unidos, ¿por qué los judíos enfrentaron discriminación en la academia durante la primera mitad del siglo pasado?

¿Cuál es la principal diferencia entre el entorno universitario y el entorno laboral?

¿Qué es una "publicación no arbitrada"?

¿Cuáles son los principales centros de neurociencia del mundo? ¿Quiénes son los principales neurocientíficos?

Como estudiante de posgrado, ¿hay alguna forma de recuperarse de un sentimiento de desilusión con mi campo y la academia en general, o es el momento de dejar de fumar?

¿Qué habilidades deben desarrollar los aspirantes a profesores universitarios mientras son estudiantes en la universidad?

¿Qué tipo de investigación debe hacer un estudiante universitario que esté interesado en una carrera en computación gráfica?

¿Es aconsejable que un estudiante de posgrado haga una investigación de "alto riesgo" que su profesor le aconseja que haga?

¿Cuántas publicaciones necesita uno para convertirse en profesor?

¿Deberían las universidades tratar de contratar profesores más conservadores o republicanos por el bien de la diversidad?

¿Cuál es tu mejor historia al hacer una presentación en una conferencia académica?

¿Cuál es la diferencia entre un instructor y un profesor asociado?

Un profesor no titular me pidió que me uniera a su grupo de investigación como asesor doctoral a pesar de que no mostraba ningún interés previo en hacerlo. ¿Qué tan común es eso? ¿Cómo puede verme como estudiante o investigador para presentar tal solicitud?

Cómo acceder a algunos conjuntos de datos de Google Académico

¿Estamos entrenando demasiados postdocs en investigación académica?