严格和透明的措施有助于提高科学文献的可重复性
JMIR Publications 最近在《医学互联网研究杂志》(JMIR) 上发表了“用严谨性和透明度指数建立机构分数:科学报告质量的大规模分析”,其中报告说,提高严谨性和透明度措施应该会提高科学文献的可重复性,但由评估者手动完成评估透明度措施通常非常困难。这项研究的总体目标是创建一种可在机构和国家之间使用的科学报告质量衡量标准,并强调高质量报告的必要性,以确保可重复性......

严格和透明的措施有助于提高科学文献的可重复性
JMIR Publications 最近在《医学互联网研究杂志》(JMIR) 上发表了“用严谨性和透明度指数建立机构分数:科学报告质量的大规模分析”,其中报告说,提高严谨性和透明度措施应该会提高科学文献的可重复性,但由评估者手动完成评估透明度措施通常非常困难。
这项研究的总体目标是创建一种可在各个机构和国家/地区使用的科学报告质量衡量标准,并强调高质量报告的必要性,以确保生物医学领域的可重复性,使用可重复性项目:癌症生物学的手稿。
作者提出了对先前引入的严谨性和透明度指数 (RTI) 的改进,该指数试图使用根据再现性指南(例如 NIH、MDAR、ARRIVE)中指定的标准评估的稿件来自动评估期刊、机构和国家的严谨性和透明度。
利用再现性项目:癌症生物学的工作,作者能够确定复制研究的表现明显优于原始论文,根据该项目,所有这些都需要作者提供额外的信息才能开始复制工作。
不幸的是,期刊、机构和国家的 RTI 衡量标准目前均低于复制研究的平均水平。 如果他们将这些复制研究的 RTI 作为未来手稿的目标,则需要做更多的工作来确保平均手稿包含足够的信息用于复制尝试。
加州大学圣地亚哥分校的安妮塔·班德罗夫斯基博士说:“研究的可重复性对于科学进步是必要的。然而,在过去十年中,大量关于研究不可重复性的报告揭示了一个长期存在的问题,事实证明这个问题存在问题且成本高昂。”
为了提高可重复性,许多科学组织和期刊都采用了透明度和开放性指南,该指南的重点是在各个期刊层面建立最佳实践。
同样,出版商驱动的材料设计、分析和报告框架是一个多学科研究框架,旨在提高生命科学研究中单个稿件级别报告的透明度。
该框架提供了一致的最低报告清单,其标准部分用于创建第一个 RTI,这是一种专注于研究方法和报告透明度的期刊质量指标。
特别是,作者在此介绍了 RTI 的最新版本,它代表了论文子集的平均 SciScore,并展示了如何使用它来评估研究机构的报告透明度。
虽然我们不能简单地将所有带有“2”的论文描述为不可重复,而所有带有“8”的论文都是可重复的,但由于存在许多领域和由此产生的最佳实践,我们可以注意到,较高的分数与更多的方法细节相关,并且可能更容易用于尝试复制。
来源:
参考:
门克,J.,等人。 (2022) 用严谨性和透明度指数建立机构评分:科学报告质量的大规模分析。 医学互联网研究杂志。 doi.org/10.2196/37324 。