Suche
Mein Konto
Des mesures de rigueur et de transparence pourraient contribuer à améliorer la reproductibilité de la littérature scientifique
JMIR Publications a récemment publié « Établir des scores institutionnels avec l'indice de rigueur et de transparence : analyse à grande échelle de la qualité des rapports scientifiques » dans le Journal of Medical Internet Research (JMIR), qui rapporte que l'amélioration des mesures de rigueur et de transparence devrait conduire à des améliorations de la reproductibilité de la littérature scientifique, mais l'évaluation des mesures de transparence est généralement très difficile lorsqu'elle est effectuée manuellement par les évaluateurs. L'objectif général de cette étude est de créer une mesure de la qualité des rapports scientifiques pouvant être utilisée dans toutes les institutions et tous les pays, ainsi que de souligner la nécessité de rapports de haute qualité pour garantir la reproductibilité...
Des mesures de rigueur et de transparence pourraient contribuer à améliorer la reproductibilité de la littérature scientifique
JMIR Publications a récemment publié « Établir des scores institutionnels avec l'indice de rigueur et de transparence : analyse à grande échelle de la qualité des rapports scientifiques » dans le Journal of Medical Internet Research (JMIR), qui rapporte que l'amélioration des mesures de rigueur et de transparence devrait conduire à des améliorations de la reproductibilité de la littérature scientifique, mais l'évaluation des mesures de transparence est généralement très difficile lorsqu'elle est effectuée manuellement par les évaluateurs.
L'objectif général de cette étude est de créer une mesure de la qualité des rapports scientifiques pouvant être utilisée dans toutes les institutions et tous les pays, ainsi que de mettre en évidence la nécessité de rapports de haute qualité pour garantir la reproductibilité au sein de la biomédecine, en utilisant des manuscrits du projet de reproductibilité : biologie du cancer.
Les auteurs abordent une amélioration de l'indice de rigueur et de transparence (RTI) précédemment introduit, qui tente d'évaluer automatiquement la rigueur et la transparence des revues, des institutions et des pays à l'aide de manuscrits évalués selon des critères spécifiés dans les directives de reproductibilité (par exemple NIH, MDAR, ARRIVE).
Grâce aux travaux du projet de reproductibilité : biologie du cancer, les auteurs ont pu déterminer que les études de réplication étaient nettement plus performantes que les articles originaux, qui, selon le projet, nécessitaient toutes des informations supplémentaires de la part des auteurs pour commencer les efforts de réplication.
Malheureusement, les mesures RTI pour les revues, les institutions et les pays sont actuellement toutes moins performantes que la moyenne des études de réplication. S’ils prennent le RTI de ces études de réplication comme cible pour les futurs manuscrits, des travaux supplémentaires seront nécessaires pour garantir que le manuscrit moyen contient suffisamment d’informations pour les tentatives de réplication.
Le Dr Anita Bandrowski de l'Université de Californie à San Diego a déclaré : « La reproductibilité de la recherche est nécessaire au progrès scientifique. Cependant, au cours de la dernière décennie, de nombreux rapports sur la non-reproductibilité de la recherche ont mis en lumière un problème persistant qui s'avère problématique et coûteux.
Pour promouvoir la reproductibilité, de nombreuses organisations et revues scientifiques ont adopté les lignes directrices en matière de transparence et d'ouverture, qui se concentrent sur l'établissement des meilleures pratiques au niveau de chaque revue.
De même, le Materials Design, Analysis, and Reporting Framework, piloté par les éditeurs, est un cadre de recherche multidisciplinaire conçu pour améliorer la transparence des rapports sur la recherche en sciences de la vie au niveau des manuscrits individuels.
Ce cadre fournit une liste de contrôle minimale cohérente pour les rapports, dont les critères ont été utilisés en partie pour créer le premier RTI, une mesure de la qualité des revues axée sur les méthodes de recherche et la transparence des rapports.
En particulier, les auteurs présentent ici la dernière version du RTI, qui représente le SciScore moyen d'un sous-ensemble d'articles, et montrent comment il peut être utilisé pour évaluer la transparence des rapports dans les institutions de recherche.
Bien que nous ne puissions pas simplement décrire tous les articles avec un « 2 » comme non répétables et tous les articles avec un « 8 » comme répétables, puisqu'il existe de nombreux domaines et les meilleures pratiques qui en résultent, nous pouvons noter que des scores plus élevés sont associés à plus de détails méthodologiques et ceux-ci sont probablement plus faciles à utiliser pour tenter de les reproduire.
Source:
Référence:
Menke, J. et coll. (2022) Établissement de scores institutionnels avec l'indice de rigueur et de transparence : analyse à grande échelle de la qualité des rapports scientifiques. Journal de recherche sur Internet médical. est ce que je.org/10.2196/37324.