Teknikkulturen ser ofta misslyckande som väsentligt. Facebooks grundare Mark Zuckerberg beskrev tänkesättet som "rör dig snabbt och bryt saker."

Men hjälper det mantrat om snabba experiment verkligen företag att lyckas?

För att svara på den frågan, Sharique Hasan och Aaron "Ronnie" Chatterji, båda strategiprofessorerna vid Duke Universitys Fuqua School of Business, studerat mer än 35, 000 högteknologiska startups grundade mellan 2008 och 2013. De sammanfattade sina resultat i "Experimentation and Startup Performance:Evidence from A/B Testing, " som kommer i tidningen Management Science och medförfattare av Rem Koning från Harvard Business School.

Forskarna fann att startups som använder en serie randomiserade kontrollerade prövningar för att testa alternativ för produktfunktioner – även kallade A/B-testning – är mer framgångsrika, i genomsnitt, än nystartade företag som inte följer den här typen av datadrivet tillvägagångssätt, Hasan sa i en livediskussion om forskningen på Fuquas LinkedIn-sida.

Går bortom maginstinkten

"För att vara ärlig, de flesta nystartade företag och de flesta småföretag har en ganska standardram för att fatta beslut, som är "lita på din magkänsla", Hasan sa. "Kanske samla in lite data. Men vanligtvis, entreprenörer har en övertygelse om något som [deras] startup borde göra, och de förföljer det och de följer igenom, " han sa.

A/B-testning möjliggör mer kvantitativt beslutsfattande som också påskyndar upptäckten av vad som fungerar och vad som inte fungerar, sa Hasan.

"Om en idé får dragning, du kan skala det snabbare, och om det inte går någonstans, du kan döda den snabbare, " han sa.

För deras analys, forskarna studerade egenskaperna, webbstatistik och produktinnovationer från tusentals nystartade företag som gjorde och inte använde A/B-testning för att avgöra om och hur testning hjälpte dem att skala sina produkter och företag.

Företag som anammat A/B-tester förbättrade sina prestationer, mätt med sidvisningar, med 30 till 100 procent efter ett års användning. De som använder A/B-tester introducerade också nya produkter i högre takt (9 till 18 procent) än företag som inte experimenterade, enligt forskningen.

En strategi som skalar

En vanlig uppfattning bland företag är att A/B-testning endast är effektiv för inkrementella förändringar eller småskaliga frågor, Hasan sa, som Googles test av 41 nyanser av blått för att identifiera den bästa färgen för dess sökverktygsfält.

Snarare, han sa, den kvalitativa forskningen och data i uppsatsen visade att A/B-tester också kunde vägleda mer betydelsefulla beslut som en del av ett företags övergripande strategi, och att testning ökade chanserna att dessa beslut skulle bli framgångsrika, sa Hasan.

"Den vetenskapliga metoden som tillämpas på affärsbeslut kan vara ett mycket kraftfullt verktyg, " Sa Hasan. "A/B-testning är bara en instansiering av faktiska datadrivna beslutsfattande av företag som kan ha en kraftfull effekt på kvaliteten på ett beslut som en startup gör."

Ett underutnyttjat verktyg

Det som förvånade forskarna var att trots dessa tydliga fördelar, mindre än en femtedel av företagen använde A/B-tester. Tester var vanligare i Silicon Valley, där företag använde det ungefär en fjärdedel av tiden, jämfört med 19 procent hos företag utanför San Francisco Bay Area. Företag med 10 eller fler anställda var mer benägna än mindre företag att använda strategin.

Data antydde också att tidigare skede, små startups utan finansiering skulle kunna dra mest nytta av A/B-tester, men tyvärr, Hasan noterade, dessa företag använde minst tester – endast 13 procent av tiden jämfört med 25 procent för mer etablerade företag finansierade av änglar eller riskkapitalinvesterare.

"Detta stöder denna idé att beslutsfattande kan vara en viktig flaskhals för framgång för start, och att använda en mer vetenskaplig, ett rigoröst tillvägagångssätt för att börja fatta beslut kan verkligen förbättra kvaliteten på en startups prestanda, " han sa.

De tidigare företagen kan implementera ett sätt att hantera vad som kan vara hundratals potentiella idéer, desto bättre är deras chanser att lyckas, sa Hasan.

"[A/B-testning] öppnar upp idéer i en startup, ", sa Hasan. "Med framsteg inom teknik som gör att startups potentiellt kan testa tusentals olika alternativ, A/B-testning är både en kostnadseffektiv och snabb metod för att upptäcka nystartsproduktens lönsamhet."