Algunas razones básicas:
1. Es imposible replicar TODO sobre un experimento exactamente. El comportamiento humano puede verse influenciado por factores aparentemente insignificantes, y podría haber sido algo completamente extraño y aparentemente no relacionado con el experimento que causó cualquier comportamiento escrito en primer lugar. En particular, los humanos son increíblemente buenos para descubrir lo que QUIERES que hagan, por lo que los resultados que obtienes a menudo dependen casi por completo de cuánto quieren los sujetos complacer al experimentador, algo que puede variar enormemente de un laboratorio a otro y de vez en cuando. hora.
2. Relacionado con el primer punto, hay muchos experimentos realizados en laboratorios de psicología que no tienen resultados interesantes. A menudo, los experimentadores luego “refinarán” el experimento y lo volverán a ejecutar hasta que obtengan algo que parezca significativo. En muchos casos, los estudios se configuran intencionalmente para que se obtengan resultados “interesantes” al azar menos de una vez en veinte. ¿Pero adivina que? Si solo se publica una corrida experimental en cincuenta, la probabilidad de que sea una de las aleatorias es muy, muy alta.
- Cómo seleccionar un tema para una tesis
- ¿Cuánto juegan la experimentación y el trabajo de laboratorio en la elaboración de un trabajo de investigación de física teórica?
- ¿Cuál es un buen tema de investigación para una tesis de gestión de riesgos?
- ¿Cuáles son algunos estudios científicos cuyos resultados fueron mal interpretados por los medios o Facebook?
- ¿Qué tipo y extensión de discapacidades físicas o psicológicas aceptaría en su asesor / supervisor al comenzar a trabajar con ellos y hasta dónde llegaría para ayudarlos?
3. Muchos experimentos no están, de hecho, bien diseñados. En particular, las pruebas estadísticas enlatadas se aplican con frecuencia de memoria, sin tener en cuenta las limitaciones de esas pruebas. Se supone que la revisión por pares capta esto, pero la mayoría de los revisores están cometiendo exactamente los mismos errores en su propio trabajo y no tienen idea de por qué están equivocados. Si REALMENTE queremos poner la “ciencia” en “ciencia social”, necesitamos una pre-evaluación obligatoria de experimentos financiados por matemáticos con capacitación específica en diseño experimental.
4. La presión para obtener resultados publicables es intensa, y los investigadores, como todos los humanos, también son muy buenos para engañarse a sí mismos y para justificar sus propias decisiones. ¿Eliminar un punto de datos porque parece una anomalía? ¡Totalmente justificable! ¿Interpolando resultados cuando la máquina fallaba? Completamente inofensivo! Y además, no hacerlo habría arruinado el experimento, que costó decenas de miles de dólares, retrasó las disertaciones de dos estudiantes de posgrado por un año, ¡y perjudicó la posibilidad de tenencia del IP!
Podría continuar, pero la realidad es que hacer buenas y rigurosas ciencias sociales es DURO. Y debido a que a menudo podemos hacerlo a bajo precio, en comparación con cosas como la física, generalmente no lo mantenemos en un estándar muy alto. Por lo tanto, obtenemos un montón de trabajo malo o engañoso que se ve muy bien y se publica e incluso se replica … por un tiempo. Además, las personas que no pueden replicar un experimento famoso y muy promocionado a menudo son culpadas y tratadas como fracasos, por lo que no dicen nada al respecto.
Y por favor no me hagas comenzar en mi propio campo original, la educación. Al menos el 95% de la investigación publicada en educación es metodológicamente incompetente y científicamente inútil. Simplemente no hay expectativas de integridad o competencia, por lo que todo lo que obtienes es basura, por lo que, entre otras cosas, ninguno de los cursos académicos requeridos que se imparten habitualmente en las escuelas de educación parece hacer algo para ayudar a las personas a convertirse en buenos maestros.
Seriamente. Cada año, hacemos que cientos de miles de futuros maestros tomen cursos de psicología e historia, filosofía y métodos de educación, a pesar del hecho de que nadie ha mostrado una relación creíble entre tomar esos cursos y convertirse en un buen maestro. Y pagamos grandes bonificaciones a los maestros que obtienen títulos de maestría, a pesar de que no hay evidencia convincente de que obtener una maestría en enseñanza o educación haga de alguien un mejor maestro.
Suspiro. /despotricar
