Möt BugFinders, det brittiska företaget som crowdsourcar konsten att testa appar

Om du anklagas för att hitta kritiska buggar i appar och webbplatser för stora kunder som Met Office, Tesco och Bang & Olufsen, kanske det inte verkar vara en smart idé att ta hjälp av testare som hämtats via internet. Enligt BugFinders CTO och grundare Martin Mudge är det dock det enda vettiga sättet att göra det.

BugFinders beskriver sitt jobb som ”true crowdsourced testing”, som använder frilansande testare från hela världen för att upptäcka och rapportera bristerna i sina kunders mjukvara. En grupp på 55 000 testare sitter och väntar på sitt nästa jobb, några tjänar så mycket som Kr800 per vecka, många gör det enbart för utmaningen.

Varför fungerar outsourcing online så framgångsrikt för mjukvarutestning? Och hur förhindrar BugFinders att känsliga brister i stora varumärkens programvara blir allmänt känd? Hur kan du, om du har kompetensen, gå med i laget? Vi träffade Martin Mudge för att ta reda på det.

Spel med siffror

Mudge började testa appar dagarna innan crowdsourcing ens hördes talas om, än mindre önskvärt. Han var chef för testteamet på mobilnätverket Orange runt decenniumskiftet, då antalet enheter du behövde testa mot var litet jämfört med idag. ”På den tiden behövde du egentligen bara täcka 15 enheter för att få bra täckning, och vi skulle använda ett team på två för att göra det,” sa han.

Snart började apputvecklare dock klaga på att buggar missades och Mudge kunde inte ta reda på varför. ”Det visade sig att på samma sätt som upptäck-skillnaden har pussel bara två bilder, om du ger testaren mer än tre enheter eller tre webbläsare för att kontrollera samma applikation, blir de i princip uttråkade av den fjärde och inte se buggar om de inte är riktigt stora”, sa han.

Det fanns ett annat problem: med appboomen som utlöstes av uppkomsten av iPhone och Android, kunde Mudges team helt enkelt inte hänga med. ”Jag och min medgrundare [who happens to be Mudge’s wife, Donna] kom på idén att det vi behövde göra var att använda ett större team av människor som är distanserade för att utföra arbetet.” Donna ägde redan sitt eget rekryteringsföretag, vilket gav dem ett redan existerande nätverk av frilansare att utnyttja, och följaktligen föddes BugFinders 2011.

Erfarna testare

BugFinders är inte som andra crowdsourced arbetsprojekt, som Amazons Mechanical Turk, där i princip vem som helst kan tjäna några pund genom att slutföra en relativt ringa uppgift. BugFinders rekryterar specifikt erfarna testare, helst de som redan har minst tre års erfarenhet av att arbeta som testare. De kan fylla på sin befintliga kompetens och lön, tjäna frilansinkomst på fritiden, eller så kan de vara en av elittestarna som kan tjäna en heltidslön genom att testa hemifrån.

Att hitta antalet testare som krävs för att göra crowdsourcing effektiv visade sig vara svårare – och dyrare – än Mudge trodde, även med Donnas erfarenhet inom rekryteringsbranschen.

Även om de snabbt anlitade en anständig gemenskap av deltidstestare i Storbritannien, behövde Mudge testare tillgängliga i flera tidszoner, så när kunder tappade en app som krävde testning inom en kort tidsram hade BugFinders personer som kunde jobba dygnet runt. ”Vi skickade människor över hela världen i ett skede för att rekrytera folk”, sa han. ”Det fungerade riktigt bra.”

Faktum är att det pressade testares siffror förbi 25 000-strecket – vad Mudge beskrev som den ”kritiska punkten där vi sedan effektivt kunde ta ett projekt när som helst, dag som natt, 365 dagar om året och leverera det”. Den siffran har sedan dess ökat till 55 000, till stor del hjälpt av befintliga testare som hänvisar kollegor, även om vem som helst kan registrera sig via företagets webbplats (gå till bugfinders.com/register).

Ett team av testare som skulle vara nära att fylla Arsenals Emirates Stadium låter som en jävla arbetsstyrka, men när du tänker på att du nu måste testa appar/webbplatser på 152 enheter för att täcka endast 80 % av trafiken, börjar du se nödvändigheten av att ha så många människor att anlita.

”De flesta av våra kunder, när vi börjar prata med dem, täcker fem eller så enheter internt,” sa Mudge. ”De går miste om enorma möjligheter att förbättra sin mobila upplevelse. Faktiskt, med 300 testare täcker vi ibland 400 eller fler mobila enheter – så långt över 80 %.”