Informes registrados gratuitos para autores y lectores
Por el Prof. Zoltan Dienes
En abril iniciamos el Informe registrado de la comunidad de pares (PCI RR), en el que se puede enviar y examinar un informe registrado en cada disciplina, evaluarlo editorialmente y (posiblemente) finalmente aceptarlo: “recomendado” en lenguaje PCI. El proceso y el resultado son gratuitos para autores y lectores. Ninguna institución tiene que pagar una tarifa por estas libertades; Libertades que tomamos para reflejar la apertura que el sine qua non de Ciencia. Aquí puede ver una conferencia de Corina Logan sobre PCI RR.
Dado que PCI RR tiene enlaces a preimpresiones, PCI RR no publicará el manuscrito recomendado (aunque tiene una recomendación de PCI RR citable con DOI). Esto significa que un autor (si quiere, pero no) puede publicar el mismo manuscrito en una revista convencional. De hecho, tenemos 19 revistas compatibles con PCI RR que garantizan la aceptación de nuestros manuscritos recomendados sin una revisión adicional de expertos o editores (siempre que se cumplan ciertas condiciones técnicas, por ejemplo). Tenga en cuenta que es el autor quien tiene la opción de revista invirtiendo las relaciones de poder típicas.
Un informe registrado es un tipo de artículo en el que un manuscrito es generalmente aceptado (o rechazado) antes de que se conozcan los resultados. Este orden de aceptación relativo a los resultados tiene como objetivo hacer frente a diversos prejuicios que pueden corromper el proceso científico. Si la cadena de razonamiento de la teoría a las predicciones y de los datos a las predicciones se construye a la luz de los datos, pueden surgir sesgos: por ejemplo, se pueden hacer predicciones arbitrarias que en realidad no siguen una teoría (porque coinciden con la datos)); o P-hacking o B-hacking (hackeo del factor bayesiano) se puede utilizar para crear una pseudoevidencia de un resultado preferido. ¿Cuántos ensayos ha leído en los que los “pronósticos” al final de la introducción parecían teóricamente un poco arbitrarios y, sin embargo, estaban extrañamente confirmados? ¿Cuántas correlaciones con una pequeña N fueron simplemente significativas? Otro sesgo lo evitan los informes registrados: los de los editores o revisores que rechazan un trabajo porque no les gustan los resultados. Como suele decir Chris Chambers, ¿qué parte del proceso científico nunca deberíamos controlar? Pero, ¿qué parte del proceso científico a menudo determina la publicación? ¿Puede hacer o deshacer una carrera con ella? Los resultados.
Una ventaja del informe registrado es que el revisor y el editor participan conjuntamente en el diseño del estudio, en un momento en el que su asesoramiento profesional aún puede considerarse seriamente y, si es necesario, implementarse. En consecuencia, una vez aprobado el procedimiento y los análisis en principio, la publicación está prácticamente garantizada. No tiene que perseguir varias revistas durante meses o años porque los encuestados consideran que un aspecto del estudio es débil. En mi experiencia, el hecho de que los consejos de revisores y editores puedan afectar todos los aspectos del diseño y análisis (sin conocimiento de los resultados) realmente cambia la dinámica de la relación entre autores, editores y revisores.
¿Los informes registrados realmente reducen el sesgo? En un estudio prerregistrado reciente, los informes registrados confirmaron las predicciones declaradas en menos del 50% de los casos; sin embargo, los informes no registrados coincidentes confirmaron las predicciones en más del 90% de los casos. Además, los informes registrados se asocian con una mayor reproducibilidad de los resultados principales de los datos originales que los artículos regulares; y el rigor metodológico y la calidad de los informes registrados se califican mucho más altos que los informes no registrados. Considero que todo esto es una prueba preliminar de que los informes registrados reducen el sesgo en el proceso científico en la práctica.
PCI RR supera algunas de las debilidades de la forma actual en que se gestionan los informes registrados en las revistas. Como se mencionó anteriormente, los informes registrados en PCI RR son completamente abiertos y gratuitos. Tenga en cuenta que esto aborda algunas inquietudes sobre la igualdad: no se requieren recursos financieros derivados del estatus social (basado en raza, género o institución) para que los mismos editores de Registered Reports responsables de las principales revistas de trabajo lleven a cabo una investigación propia. Se recomienda públicamente. (¿Qué tan fácil es para usted pagar por los APC para revistas de renombre?) PCI RR presenta varias otras innovaciones clave únicas.
Con un informe registrado programático, una serie de estudios relacionados pueden, en principio, aceptarse antes de que los resultados estén disponibles. Cada uno de estos estudios se puede realizar fácilmente, y cada uno posiblemente conduzca a su propio artículo. Esto acelera enormemente el proceso mediante el cual un programa de investigación puede publicarse como una serie de informes registrados.
En una revisión planificada, los autores envían una «instantánea» breve, de una página, basada en una plantilla, de su estudio propuesto. Luego, el recomendante envía la instantánea a los revisores potenciales y organiza el proceso de revisión para una fecha fija en el futuro especificada por los autores. Mientras tanto, los autores preparan el manuscrito completo. El objetivo es reducir significativamente el tiempo de verificación inicial.
Operamos un sistema escalonado de control de sesgos. Esto significa que si bien el control de sesgo total se aplica cuando los datos aún no están allí, muchos de los beneficios del proceso de Informes registrados pueden aplicarse incluso si los datos están allí, pero aún no se ha accedido, por ejemplo; o en principio accesible pero aún no accedido por los investigadores, etc. En cualquier caso, tratamos de controlar el sesgo tanto como sea posible, reconociendo que existen diferentes riesgos en diferentes situaciones.
Las personas interesadas en convertirse en un remitente de PCI RR deben realizar una prueba de dos horas después de leer las extensas Pautas de remisión. Hasta donde sabemos, la formación formal de los recomendadores (editores) es un punto de venta único de PCI RR.
Hasta ahora hemos tenido 10 presentaciones, lo que en mi opinión es una tasa significativamente más alta que para los Informes Registrados de cualquier revista. Si tiene una buena idea para un informe registrado o desea participar como recomendador, ¡ya sabe a quién acudir!
Zoltan Dienes es profesor de psicología experimental en la Universidad de Sussex. Es el autor del influyente libro «Understanding Psychology as a Science» y es invitado regularmente a ofrecer talleres de informes registrados y bayesianos en todo el mundo. Produjo la primera calculadora de factores bayesianos en línea en 2008 y ha publicado extensamente sobre factores bayesianos, incluido cómo aprovechar al máximo los resultados insignificantes.
Obtenga más información sobre el enfoque estratégico de la facultad en los métodos psicológicos y nuestro compromiso con la ciencia abierta.
