definiera”Reproducerbarhet”

CURE erkänner att användningen av termen” Reproducerbarhet ”varierar mellan sammanhang, vars definition kan bli förvirrande när andra ord som” replikerbarhet ”och” repeterbarhet ” används för att uttrycka samma eller liknande begrepp. CURE försöker inte upprätta en universell standard för användning av någon av dessa termer; snarare anser den att det är nödvändigt för datakureringsutövare att förstå deras olika betydelser och nyanser. Följande är exempel på hur dessa termer har definierats.

Goodman, Fanelli, & Ioannidis (s. 2)

  • metoder Reproducerbarhet: förmågan att implementera, så exakt som möjligt, de experimentella procedurerna, med samma data och verktyg, för att få samma resultat.
  • Resultat Reproducerbarhet: produktionen av bekräftande resultat i en ny studie, efter att ha följt samma experimentella metoder.
  • inferentiell Reproducerbarhet: skapandet av kunskapskrav av liknande styrka från en studiereplikation eller reanalys.

Open Science Collaboration (s. 300-301)

  • Reproducerbarhet: (relaterad till repeterbarhet och replikerbarhet) avser om forskningsresultat förekommer. I stort sett avser Reproducerbarhet direkt replikering, ett försök att replikera den ursprungliga observationen med samma metoder från en tidigare undersökning men samla unika observationer.Mest allmänt hänvisar Reproducerbarhet till konceptuell replikering, ett försök att validera tolkningen av den ursprungliga observationen genom att manipulera eller mäta samma konceptuella variabler med olika tekniker.

NSF Workshop (s. 32)

  • Reproducerbarhet: förmågan hos ett experiment eller beräkning att dupliceras av andra forskare som arbetar självständigt.
  • repeterbarhet: förmågan hos ett experiment eller beräkning att dupliceras med samma metod.
  • tillförlitlighet: i vilken utsträckning en forskningsmetod ger samma resultat varje gång den tillämpas på samma system. Ett vetenskapligt resultat sägs ha en hög tillförlitlighet om samma resultat uppnås inom angiven osäkerhet under konsekventa förhållanden.

Patel, Peng, & purjolök (s. 3)

  • reproducerbar: givet en population, hypotes, experimentell design, experimenterare, data, analysplan och kod får du samma parameteruppskattningar i en ny analys.
  • replikerbar: med tanke på en population, hypotes, experimentell design och analysplan får du konsekventa uppskattningar när du minns data och gör om analysen.

pr Ubbl & Rauber (introduktion)

  • reproducerbar: Om och endast om det är konsekvent kan vetenskapliga resultat erhållas genom att bearbeta samma data med samma algoritmer med samma verktyg. För att ett experiment ska kunna reproduceras måste vi ha kunskap om åtminstone följande information: forskningsdata och metadata som används; metoder som tillämpas i experimentet; och ools, programvara och exekveringsmiljö som används i experimentet.

Stodden (terminologi avsnitt)

  • repeterbarhet: (Samma team, samma experimentella inställning) mätningen kan erhållas med angiven precision av samma team med samma mätprocedur, samma mätsystem, under samma driftsförhållanden, på samma plats vid flera försök. För beräkningsexperiment betyder det att en forskare på ett tillförlitligt sätt kan upprepa sin egen beräkning.
  • Replikerbarhet: (Olika team, samma experimentella inställning) mätningen kan erhållas med angiven precision av ett annat team med samma mätprocedur, samma mätsystem, under samma driftsförhållanden, på samma eller en annan plats vid flera försök. För beräkningsexperiment betyder det att en oberoende grupp kan få samma resultat med författarens egna artefakter.
  • Reproducerbarhet: (Olika team, olika experimentella inställningar) mätningen kan erhållas med angiven precision av ett annat team, ett annat mätsystem, på en annan plats i flera försök. För beräkningsexperiment innebär detta att en oberoende grupp kan få samma resultat med hjälp av artefakter som de utvecklar helt oberoende.

Goodman, sn, Fanelli, D., & Ioannidis, JPA (2016). Vad betyder reproducerbarhet för forskning? Vetenskap translationell medicin, 8 (341), 341ps12. https://doi.org/10.1126/scitranslmed.aaf5027

National Science Foundation. (2017). Workshop om robusthet, tillförlitlighet och reproducerbarhet i vetenskaplig forskning. Hämtad från http://www.mrsec.harvard.edu/2017NSFReliability/include/NSF_Workshop_Robustness.Reliability.Reproducibility.Report.pdf

Open Science Collaboration. (2014). Reproducerbarhet projektet. I V. Stodden, F. Leisch, & Rd Peng (Red.), Genomförande av reproducerbar forskning (s.299-323). Chapman och Hall / CRC.

Patil, P., Peng, R. D., & purjolök, J. (2016). En statistisk definition för reproducerbarhet och replikerbarhet. BioRxiv, 066803. https://doi.org/10.1101/066803

Pröll, S., & Rauber, A. (2017). Enabling reproducibility for small and large scale research data sets. D-Lib Magazine, 23(1/2), https://doi.org/10.1045/january2017-proell

Stodden, V. (2016). Artifact review and badging. Retrieved from https://www.acm.org/publications/policies/artifact-review-badging

Lämna ett svar

Din e-postadress kommer inte publiceras.