JMIR Publications publicó recientemente «Establecimiento de puntajes institucionales con el índice de rigor y transparencia: análisis a gran escala de la calidad de los informes científicos» en el Revista de investigación médica en Internet (JMIR)que informó que mejorar las medidas de rigor y transparencia debería conducir a mejoras en la reproducibilidad en la literatura científica, pero evaluar las medidas de transparencia tiende a ser muy difícil si los revisores las realizan manualmente.
El objetivo general de este estudio es establecer una métrica de calidad de informes científicos que se pueda usar en instituciones y países, así como resaltar la necesidad de informes de alta calidad para garantizar la replicabilidad dentro de la biomedicina, haciendo uso de manuscritos del Proyecto de Reproducibilidad: Biología del Cáncer.
Los autores abordan una mejora del Índice de Rigor y Transparencia (RTI) presentado anteriormente, que intenta evaluar automáticamente el rigor y la transparencia de las revistas, instituciones y países utilizando manuscritos calificados según los criterios que se encuentran en las pautas de reproducibilidad (p. ej., NIH, MDAR, ARRIVE ).
Usando el trabajo del Proyecto de Reproducibilidad: Biología del Cáncer, los autores pudieron determinar que los estudios de replicación obtuvieron puntajes significativamente más altos que los artículos originales, que según el proyecto, todos requerían información adicional de los autores para comenzar los esfuerzos de replicación.
Desafortunadamente, las medidas de RTI para revistas, instituciones y países actualmente obtienen puntajes más bajos que el promedio del estudio de replicación. Si toman el RTI de estos estudios de replicación como objetivo para futuros manuscritos, se necesitará más trabajo para garantizar que el manuscrito promedio contenga suficiente información para los intentos de replicación.
La Dra. Anita Bandrowski de la Universidad de California en San Diego dijo: «La reproducibilidad de la investigación es necesaria para el progreso científico. Sin embargo, durante la última década, numerosos informes sobre la irreproducibilidad de la investigación han arrojado luz sobre un problema persistente, que está demostrando ser problemático y costoso».
«La reproducibilidad de la investigación es necesaria para el progreso científico. Sin embargo, durante la última década, numerosos informes sobre la irreproducibilidad de la investigación han arrojado luz sobre un problema persistente, que está demostrando ser problemático y costoso».
En un esfuerzo por fomentar la reproducibilidad, numerosas organizaciones científicas y revistas han adoptado las pautas de Promoción de la Transparencia y la Apertura, que se centran en establecer las mejores prácticas a nivel de revistas individuales.
En una línea similar, el marco de diseño, análisis e informes de materiales impulsado por el editor es un marco de investigación multidisciplinario diseñado para mejorar la transparencia de los informes en la investigación de ciencias de la vida a nivel de manuscritos individuales.
Este marco proporciona una lista de verificación de informes mínimos y coherentes cuyos criterios se utilizaron, en parte, para crear la primera RTI, una métrica de calidad de las revistas que se centra en las metodologías de investigación y la transparencia de los informes.
Específicamente, los autores aquí presentan la última versión del RTI, que representa el SciScore promedio sobre un subconjunto de artículos, y demuestran cómo se puede usar para evaluar la transparencia de los informes dentro de las instituciones de investigación.
Si bien no es práctico describir simplemente todos los artículos con un «2» como no replicables y todos los artículos con un «8» como replicables, dado que existen numerosos campos y sus mejores prácticas posteriores, se puede afirmar que los puntajes más altos están asociados con más detalles metodológicos y, como tales, es probable que sean más fáciles de usar para intentar una replicación.
Joe Menke et al, Establecimiento de puntajes institucionales con el índice de rigor y transparencia: análisis a gran escala de la calidad de los informes científicos, Revista de investigación médica en Internet (2022). DOI: 10.2196/37324
Proporcionado por Publicaciones JMIR
Citación: Índice de rigor y transparencia: análisis a gran escala de la calidad de los informes científicos (26 de julio de 2022) recuperado el 26 de julio de 2022 de https://medicalxpress.com/news/2022-07-rigor-transparency-index-large-scale-analysis .html
Este documento está sujeto a derechos de autor. Aparte de cualquier trato justo con fines de estudio o investigación privados, ninguna parte puede reproducirse sin el permiso por escrito. El contenido se proporciona únicamente con fines informativos.