¿Qué observa principalmente en un trabajo de investigación para poder analizarlo críticamente?

En un orden aproximado, es probable que estos sean específicos del dominio, y esto es algo así como una caricatura:

  1. Resumen. ¿Qué es el dominio? ¿Cuál es el problema específico? ¿Qué tan bien se resolvió el problema? Fuzzies cálidos por darme algunos resultados teaser.
  2. Bibliografía. A menudo tengo una idea aproximada de quién está trabajando en esta área. ¿Estás citando sus papeles? ¿Tiene una mezcla razonable de citas actuales e históricas? ¿Revisaste la bibliografía? En resumen, ¿me has dado algo de confianza de que conoces esta área?
  3. Introducción. En un mundo ideal, el primer párrafo me orienta al dominio, el segundo párrafo indica el problema, los párrafos 3 a 5 indican la contribución, y el párrafo final comienza “El resto del documento está organizado de la siguiente manera”. La introducción debe ser El papel escrito en miniatura. Quiero saber qué has hecho, por qué crees que es importante y qué tan bien lo lograste. Si alguno de estos no es perfectamente obvio, estoy gruñón.
  4. Gráficos / ecuaciones. Ahora voy a hojear el papel buscando gráficos (mi mejor mitad busca ecuaciones, pero ella es una teórica). ¿Has etiquetado tus ejes x e y? ¿Puedo leer sus gráficos sin poner mi nariz a una pulgada del papel? ¿Estás dibujando contrastes útiles? Si está afirmando que su enfoque es mejor que las técnicas existentes, ¿ha representado (bastante) el trabajo anterior? ¿Son apropiadas sus pruebas? ¿Tiene suficiente poder estadístico para hacer su reclamo? (No ejecute el experimento cinco veces, descarte max y min y promedie los datos restantes). ¿Son obvios los resultados insinuados en el resumen y la introducción?
  5. El resto del papel. La metodología, el modelo teórico, las conclusiones, el trabajo futuro y el trabajo relacionado son todos importantes. Pero no pueden rescatar un papel defectuoso, y es poco probable que vuelquen un papel competente. Sin embargo, quiero ver que hay suficiente información para que el trabajo pueda ser replicado por alguien “experto en la materia”.

Una última nota: no espero la perfección, pero sí quiero ver un avance significativo en el estado del arte. Y sí, soy bastante consciente de las limitaciones de mi propio trabajo (y si supiera que los estudiantes brillantes de doctorado seguirían leyendo esos documentos una década después, me gustaría pensar que habría revisado los errores tipográficos una vez más. )

Lea sus documentos (y los de sus alumnos) con las más altas expectativas, y todos los demás con al menos un galón imperial de paciencia. La investigación es difícil. Escribir investigaciones es más difícil.

Intento buscar la sección de experimentos. Algunos papeles de mierda usan experimentos no relacionados solo para pulir su método. Pero cuando prueba sus ideas sobre un problema diferente, solo obtiene un resultado tonto.