Griežtumo ir skaidrumo priemonės galėtų padėti pagerinti mokslinės literatūros atkuriamumą

Griežtumo ir skaidrumo priemonės galėtų padėti pagerinti mokslinės literatūros atkuriamumą

JMIR leidiniai neseniai paskelbė „Institucinių balų nustatymas naudojant griežtumo ir skaidrumo indeksą: didelio masto mokslinės ataskaitų kokybės analizė“ žurnale „Journal of Medical Internet Research“ (JMIR), kuriame teigiama, kad tobulinant griežtumo ir skaidrumo priemones turėtų pagerėti mokslinės literatūros atkuriamumas, tačiau vertintojams, kai skaidrumo priemones atlieka rankiniu būdu, paprastai yra labai sunku.

Bendras šio tyrimo tikslas yra sukurti mokslinių ataskaitų kokybės matą, kurį būtų galima naudoti įvairiose institucijose ir šalyse, taip pat pabrėžti aukštos kokybės ataskaitų teikimo poreikį, siekiant užtikrinti atkuriamumą biomedicinoje, naudojant rankraščius iš Atkuriamumo projekto: vėžio biologija.

Autoriai patobulino anksčiau įvestą griežtumo ir skaidrumo indeksą (RTI), kuriuo bandoma automatiškai įvertinti žurnalų, institucijų ir šalių griežtumą ir skaidrumą, naudojant rankraščius, įvertintus pagal atkuriamumo gairėse nurodytus kriterijus (pvz., NIH, MDAR, ARRIVE).

Naudodami darbą iš atkuriamumo projekto: vėžio biologija, autoriai sugebėjo nustatyti, kad replikacijos tyrimai buvo žymiai geresni nei pirminiai dokumentai, o visa tai, remiantis projektu, iš autorių reikalavo papildomos informacijos, kad būtų galima pradėti replikacijos pastangas.

Deja, žurnalų, institucijų ir šalių RTI priemonės šiuo metu yra blogesnės nei replikacijos tyrimo vidurkis. Jei jie imsis šių replikacijos tyrimų RTI kaip būsimų rankraščių taikinį, reikės daugiau dirbti, kad būtų užtikrinta, jog vidutiniame rankraštyje būtų pakankamai informacijos, reikalingos replikuoti.

Dr. Anita Bandrowski iš Kalifornijos universiteto San Diego sakė: "Mokslo pažangai būtinas mokslinių tyrimų atkuriamumas. Tačiau per pastarąjį dešimtmetį daugybė ataskaitų apie tyrimų neatkuriamumą atskleidė nuolatinę problemą, kuri yra problemiška ir brangi."

Siekdamos skatinti atkuriamumą, daugelis mokslinių organizacijų ir žurnalų priėmė Skaidrumo ir atvirumo gaires, kuriose pagrindinis dėmesys skiriamas geriausios praktikos nustatymui atskirų žurnalų lygmeniu.

Panašiai, leidėjų sukurta Medžiagų projektavimo, analizės ir ataskaitų teikimo sistema yra daugiadisciplinė mokslinių tyrimų sistema, skirta gyvybės mokslų tyrimų ataskaitų teikimo atskirų rankraščių lygmeniu skaidrumui pagerinti.

Šioje sistemoje pateikiamas nuoseklus minimalus ataskaitų teikimo kontrolinis sąrašas, kurio kriterijai iš dalies buvo naudojami kuriant pirmąjį RTI – žurnalo kokybės metriką, orientuotą į tyrimų metodus ir ataskaitų skaidrumą.

Visų pirma, autoriai čia pateikia naujausią RTI versiją, kuri parodo vidutinį SciScore visame straipsnių pogrupyje ir parodo, kaip ji gali būti naudojama vertinant ataskaitų skaidrumą mokslinių tyrimų institucijose.

Nors negalime visų straipsnių su „2“ tiesiog apibūdinti kaip nepakartojamų, o visų straipsnių su „8“ kaip pasikartojančiais, nes yra daug laukų ir iš jų gaunamos geriausios praktikos, galime pastebėti, kad aukštesni balai yra susiję su daugiau metodologinių detalių ir tai greičiausiai bus lengviau panaudoti bandant replikuoti.

Šaltinis:

JMIR leidiniai

Nuoroda:

Menke, J. ir kt. (2022) Institucinių balų nustatymas naudojant griežtumo ir skaidrumo indeksą: didelio masto mokslinės ataskaitų kokybės analizė. Medicinos interneto tyrimų žurnalas. doi.org/10.2196/37324.