Forskare har förbättrat bedömningen av konsekvens i metaanalys. Det förbättrade konsekvensmåttet tar hänsyn till statistisk styrka, och det har potential att förändra tolkningen av metaanalyser. Den nya åtgärden publicerades i European Journal for Philosophy of Science .

Metaanalys avser att kombinera resultat från flera studier matematiskt. Framförallt, medicin betraktar metaanalyser som den högsta bevisnivån. Om en metaanalys rekommenderar en behandling, behandlingen blir troligen etablerad.

Metaanalys måste vara konsekvent i sig. Konventionella mått på konsekvens gynnar helt enkelt stora studier och betraktar inte statistisk styrka som en källa till inkonsekvens. Statistisk styrka anger förmågan hos en studie att upptäcka statistiskt signifikanta resultat, såsom effekter av en behandling.

"Att upprepa en studie med hög statistisk styrka är svårare än att upprepa en studie med låg statistisk styrka. Vårt föreslagna mått på inkonsekvens betonar denna aspekt, " säger datachef Ari Voutilainen från Östra Finlands universitet, en av de fyra utvecklarna av åtgärden.

"Om en metaanalys kombinerar studier som skiljer sig från varandra med avseende på statistisk styrka, metaanalysen är inkonsekvent, även om varianserna inom studien är låga. Dessutom, det är viktigt att studier med högst statistisk styrka har starkast effekt på resultaten av en metaanalys. Vår föreslagna åtgärd accentuerar betydelsen av statistisk makt också ur denna synvinkel."

Vetenskapliga tidskrifter publicerar årligen cirka en halv miljon metaanalyser. Följaktligen, det förbättrade konsekvensmåttet kan ha en betydande effekt på forskningen i allmänhet.