I fotboll, fotboll och basket, spelarens kvalitet har en uppenbar och ofrånkomlig metrik:poängsättning av touch-downs, mål, poäng. I baseboll, Det är mer komplicerat - det är inte lätt att direkt associera en enda spelares spel med lagvinst. Det är därför "wins above replacement player" (WARP) har blivit så populärt:Det är en statistik som lyckas samla en spelares totala bidrag till sitt lag – anfall och försvar och primär position – till en lättförståelig figur.

Nyckeln till WARP:s popularitet är att den destillerar alla dessa faktorer till en universell uppskattning av värdet uttryckt i antalet vinster en spelare är värd för sitt lag om de skadades och måste ersättas av en fritt tillgänglig minor league-spelare (faktiskt, en sammansatt baslinje minor leaguer). Skapad av den sabermetriska basebollgemenskapen, WARP spelar en avgörande roll när det gäller att rösta om årliga utmärkelser, sådan MVP, Cy Young eller Silver Slugger.

Men mäter det - eller till och med grovt - spelarvärdet?

Initialt, Austin Brown - en doktorsexamen student vid University of Northern Colorado vid institutionen för tillämpad statistik och forskningsmetoder - var intresserad av att ta reda på sambandet mellan skador, lag som fångar skadeproblemet under den ordinarie säsongen och lagets prestation. Men när han arbetade med ämnet med sin rådgivare – Jay Schaffer, professor i tillämpad statistik och forskningsmetoder — de började titta på förhållandet mellan enskilda spelare och lagets prestationer. "Vår tanke var att det är osannolikt att en spelare med lägre kvalitet påverkar lagets övergripande prestationer på samma sätt som en spelare med högre spelkvalitet, " säger han. "Och det ledde oss till WARP."

"Men när vi tittade på 2016 MLB-säsongen, vi upptäckte att WARP-statistiken inte mätte vad vi trodde att den borde mäta. Vi tog typ ett steg tillbaka och tänkte, 'Okej, det här är lite konstigt – det här är definitivt inte vad vi misstänkte.'"

De misstänkte att säsongen 2016 kan vara en avvikelse. "Det var ett par riktigt bra lag som råkade ha många skador, " säger Brown. "Så, vi trodde att det kan ha varit att kasta bort det. "Men när de utvidgade sin analys till att täcka säsongerna 2014–2017, VARP vissnade. "Oavsett hur vi såg på det, även när vi tog hänsyn till olika oberoende variabelkombinationer, det är bara inte relaterat till vinster, säger Brown.

"När MLB-spelare blev skadade och de riktiga ersättningsspelarna var tvungna att komma in och spela ett antal matcher, teamets prestation över hela linjen påverkades inte riktigt, " säger Brown. "Om en spelare var i ett dåligt lag, laget tenderade fortfarande att spela dåligt. Om en spelare var i ett bra lag, laget tenderade fortfarande att spela bra."

När Los Angeles Dodgers all-star pitcher Clayton Kershaw missade en betydande del av säsongen 2016 mellan juli och september på grund av skada, Dodgers spelade faktiskt något bättre (i form av vinstprocent) än innan han blev skadad. Det betydde inte att han var en sämre spelare än spelaren som ersatte honom. Det innebar att kvaliteten på laget var mer indikativ för lagets prestation.

"Jag tror att problemet med dessa övergripande mått på spelarkvalitet i baseboll är att baseboll inte är som fotboll, det är inte som hockey, det är inte som basket, Brown förklarar. "Titta på NBA-finalerna förra säsongen. LeBron James tog i stort sett sitt lag till NBA -finalen själv eftersom resten av spelarna inte är i närheten av hans kvalitetsnivå. Men i baseboll, det är bara inte samma sak. Det finns fantastiska spelare, självklart, men det är verkligen svårt för dem att bära ett lag på egen hand på grund av hur spelet spelas."

Att samla in och organisera skadedata var inte så lätt som man kan tro, med tanke på passionen för basebollstatistik och den inverkan den har haft på spelet. Brown och Schaffer var tvungna att dra från MLB, Baseball Prospekt, Baseball referens, och Sports Illustrated . Vilket innebar mycket tid att rensa och slå samman data. Och det är kanske därför, till viss del, WARP tog fart – att få rätt data för att kolla upp det var en stor utmaning.

Nästa steg, säger Brown, är att borra längre ner i data och räkna ut en statistik som är mer indikativ för spelarens kvalitet-en som härrör från spelarspecifika faktorer. "Det här kommer förmodligen inte att kunna skala på det sätt som WARP gör, säger Brown, "vilket är det som gör WARP så populärt. Men det kommer att vara mer användbart. Till skillnad från WARP, det kommer faktiskt att mäta något på spelarnivå som är mer direkt relaterat till lagets prestation."