Den största studien någonsin av påstådd rasprofilering under trafikstopp har funnit att svarta, som blir överkörda oftare än vita om dagen, är mycket mindre benägna att stoppas efter solnedgången, när "en slöja av mörker" maskerar deras ras.

Det är ett av flera exempel på systematisk fördom som framkom från en femårig studie som analyserade 95 miljoner trafikstopp, inlämnad av poliser hos 21 statliga patrullbyråer och 35 kommunala polisstyrkor från 2011 till 2018.

Den Stanford-ledda studien fann också att när förare blev stoppade, poliser sökte igenom bilar av svarta och latinamerikaner oftare än vita. Forskarna undersökte också en delmängd av data från Washington och Colorado, två stater som legaliserade marijuana, och upptäckte att även om denna förändring resulterade i färre sökningar totalt sett, och därmed färre sökningar av svarta och latinamerikaner, Minoriteter var fortfarande mer benägna än vita att få sina bilar genomsökta efter en pull-over.

"Våra resultat indikerar att polisens stopp och sökningsbeslut lider av ihållande rasfördom, och peka på värdet av politiska ingripanden för att mildra dessa skillnader, " skriver forskarna i numret 4 maj av Naturen Mänskligt beteende .

Tidningen kulminerar ett femårigt samarbete mellan Stanfords Cheryl Phillips, en journalistikföreläsare vars doktorander fick rådata genom förfrågningar om offentliga register, och Sharad Goel, en professor i management science och engineering vars datavetenskapsteam organiserade och analyserade data.

Goels lag, som inkluderade Ravi Shroff, professor i tillämpad statistik vid New York University, tillbringade år med att plocka igenom data, eliminera poster som var ofullständiga eller från fel tidsperioder, att skapa den 95 miljoner rekord-databas som låg till grund för deras analys. "Det finns inget sätt att överskatta svårigheten med den uppgiften, sa Goel.

Genom att skapa den databasen kunde teamet hitta statistiska bevis för att ett "mörkrets slöja" delvis immuniserade svarta mot trafikstopp. Den termen och idén har funnits sedan 2006 när den användes i en studie som jämförde loppet av 8, 000 förare i Oakland, Kalifornien, som stoppades när som helst på dygnet under en sexmånadersperiod. Men resultaten från den studien var ofullständiga eftersom urvalet var för litet för att bevisa en koppling mellan himlens mörker och de stoppade förarnas ras.

Stanford-teamet bestämde sig för att upprepa analysen med den mycket större datamängden som de hade samlat in. Först, de minskade intervallet av variabler de var tvungna att analysera genom att välja en specifik tid på dygnet – runt 19.00. – när de troliga orsakerna till ett stopp var mer eller mindre konstanta. Nästa, de utnyttjade det faktum att under månaderna före och efter sommartid varje år, himlen blir lite mörkare eller ljusare, dag för dag. Eftersom de hade en så enorm databas, forskarna kunde hitta 113, 000 trafikstopp, från alla platser i deras databas, som hände på dessa dagar, före eller efter att klockor sprang framåt eller föll tillbaka, när himlen blev mörkare eller ljusare vid 19-tiden. lokal tid.

Denna datauppsättning gav ett statistiskt giltigt urval med två viktiga variabler - racet för föraren som stoppades, och himlens mörker runt 19.00. Analysen lämnade ingen tvekan om att ju mörkare det blev, desto mindre sannolikt blev det att en svart förare skulle stoppas. Det omvända var sant när himlen var ljusare.

Mer än något enskilt fynd, samarbetets mest bestående effekt kan komma från Stanford Open Policing Project, som forskarna började göra sin data tillgänglig för undersökande och datakunniga reportrar, och att hålla workshops för att hjälpa reportrar att lära sig hur man använder data för att göra lokala berättelser. Till exempel, forskarna hjälpte reportrar på den Seattle-baserade ideella nyhetsorganisationen, Undersök West, förstå mönstren i data för berättelser som visar partiskhet i polissökningar av indianer. Den rapporteringen fick Washington State Patrol att se över sina rutiner och öka officersutbildningen. Liknande, forskarna hjälpte reportrar på Los Angeles Times att analysera data som visade hur polisen sökte efter minoritetsförare mycket oftare än vita. Det resulterade i en berättelse som ingick i en större utredningsserie som ledde till förändringar i Los Angeles Police Departments praxis.

Goel och Phillips planerar att fortsätta samarbeta genom ett projekt kallat Big Local News som kommer att utforska hur datavetenskap kan belysa offentliga frågor, såsom förverkande av civila tillgångar – fall där brottsbekämpande myndigheter har tillstånd att beslagta och sälja egendom som är förknippad med ett brott. Samla in och analysera register över när och var sådana anfall inträffar, till vem, och hur sådan egendom disponeras kommer att bidra till att belysa hur denna praxis används. Big Local News arbetar också med att samarbeta för att standardisera information från polisens disciplinärenden.

"Dessa projekt visar kraften i att kombinera datavetenskap med journalistik för att berätta viktiga historier, sa Goel.