Ett projekt för att bedöma reproducerbarheten av biomedicinsk forskning i Brasilien har idag beskrivits i tidskriften med öppen tillgång eLife .

Det brasilianska reproducerbarhetsinitiativet är ett systematiskt, multicenter försök att upprepa experiment från publicerade artiklar som kommer från Brasilien, med studier som ska påbörjas senare i år och resultat förväntas 2021. Det är det första projektet i sitt slag som är utformat för att uppskatta reproducerbarheten av forskning i ett specifikt land.

Lanserades 2018, Initiativet tilldelades nyligen ett anslag på 1 miljon R$ (cirka 275 USD, 000) från Serrapilheira-institutet – Brasiliens första privata institut dedikerat till att stödja vetenskaplig forskning – för att upprepa mellan 60 och 100 experiment i minst tre olika laboratorier vardera.

Replikationsstudierna kommer att baseras på individuella experiment, snarare än hela forskningsartiklar, att öka täckningen av den publicerade litteraturen och underlätta analysen. Studiernas omfattning kommer också att begränsas till vanliga metoder som är allmänt tillgängliga i Brasilien, för att säkerställa att de kan replikeras inom projektets nätverk av mer än 70 samverkande laboratorier.

Om det ursprungliga resultatet av ett experiment ligger inom variationsintervallet som förutspåtts av replikationsstudierna, det kommer att anses reproducerbart. Resultaten kommer sedan att användas för att bedöma om det finns egenskaper hos originalartiklarna som kan förutsäga reproducerbarhet.

Olavo Amaral, Professor vid Institutet för medicinsk biokemi, Federal University of Rio de Janeiro, Brasilien, kommer att leda projektet, tillsammans med ett koordinerande team som inkluderar forskarna Kleber Neves, Clarissa Carneiro och Ana Paula Sampaio, från samma universitet. De kommer att vara ansvariga för att välja metoder och experiment för att replikera, samt övervaka arbetet i de samverkande labben.

"De flesta ansträngningar för att uppskatta reproducerbarheten av publicerade resultat har fokuserat på specifika forskningsområden, som psykologi och cancerbiologi, även om vetenskap vanligtvis bedöms och finansieras på regional eller nationell basis, " säger Amaral. "Här, vi erbjuder ett annat perspektiv på konceptet, som täcker olika områden inom biovetenskaplig forskning med fokus på ett visst land."

Amaral tillägger att projektet inte är utan sina utmaningar. Till exempel, det kan finnas farhågor om att replikering av andra forskares arbete tyder på misstro mot de ursprungliga resultaten. Också, eftersom en viss grad av irreproducerbarhet förväntas – baserat på resultat från tidigare reproducerbarhetsansträngningar – kan detta skapa oro för brasiliansk vetenskap eftersom det inte kommer att finnas några uppskattningar från andra länder för jämförelse.

"För att hjälpa till att motverka dessa farhågor, vi vidtar åtgärder för att säkerställa att projektet ses som vi själva föreställer det:ett förstapersonsinitiativ från det brasilianska forskarsamhället för att utvärdera sin egen praxis på ett öppet, opartisk och transparent sätt, säger Amaral.

"Oavsett resultatet kan bli, detta projekt kommer att sätta Brasilien i spetsen för reproducerbarhetsdebatten, om så bara för att vi sannolikt kommer att vara det första landet att genomföra en sådan utvärdering. Verkligen, vi hoppas att andra länder kan bli inspirerade att öppet bedöma sin egen reproducerbarhet. Detta kan hjälpa till att vägleda nationella finansiärer i att utvärdera denna centrala dimension av vetenskap, ge dem insikter om var de ska rikta sina investeringar och främja tillförlitligheten hos publicerad forskning."