En av “sanningarna” kring öppna, användargenerade alternativ som Wikipedia är att det är de trogna anhängarna som borgar för den höga kvaliteten, och att anonyma enstaka ändringar stjälper snarare än hjälper. Det stämmer inte, visar forskare från amerikanska Dartmouth College.
Forskarna studerade ändringar i franska och holländska Wikipedia, utförda av såväl anonyma som identifierade användare (även anonyma användare har ett slags “identitet” i och med att de identifieras genom IP-numret till den dator de satt vid, och de flesta tenderar att ha samma IP-nummer över tiden). Forskarnas mått för kvaliteten på en ändring var baserat hur mycket av den gamla texten som behölls vid nästa ändring.
I genomsnitt gjorde en användare 9 ändringar, men antalet varierade stort: vissa gjorde bara en ändring, andra 50 ändringar. Generellt bidrog registrerade användare med mer ändringar över ett vidare spann av ämnen. Anonyma användare bidrog däremot med bättre ändringar – tvärtemot vad man generellt förväntar sig. Intressantast var den kategori som forskarna kallar “goda samariter”; de anonyma icke återvändande användare som bara gör en eller ett fåtal ändringar. Deras ändringar hade nämligen hög kvalitet, högre än den för ickeanonyma registrerade användare som gjorde ett liknande antal ändringar. Gränsen för den effekten gick vid fem ändringar. Sammantaget ökade kvaliteten med antalet ändringar för registrerade användare, och minskade med antalet för anonyma användare.
Resultatet baseras på ett slumpmässigt urval av runt 1750 användare från varje kategori och för varje språk. För båda språken var de oregistrerade användarna i verkligheten ungefär tio gånger fler än de registrerade. Därmed undersöktes en betydligt större del av de registrerade användarna än av de oregistrerade, och resultaten viktades för att kompensera för detta. (Totalt fanns vid tidpunkten för insamlingen 53901 användare för den franska delen och 33217 användare för den holländska delen, och drygt 7000 ingick i studien).
Det främsta problemet med metoden, som jag kan se, är att den riskerar att övervärdera kvaliteten på ändringar i sådana artiklar som inte många läser (och som därför sannolikt går oändrade längre, trots att de kanske egentligen är fel). Det är svårt att uttala sig om hur stor del av franska och holländska Wikipedia som utgjordes av sådana artiklar våren 2005 (när datainsamlingen till studien påbörjades), och forskarna diskuterar inte problematiken kring ojämnt fördelade läsare i sin artikel.
Vad jag gillar med det här resultatet är att det stöder min tes om att anonymitet inte är något automatiskt “farligt”, såsom alltför många människors magreaktioner verkar få dem att tro. Det skulle vara intressant att göra något slags motsvarande undersökning på till exempel bloggkommentarer (där fördelningen av anonym resp. registrerad/identifierad verkar vara den motsatta), men det blir så klart lite krångligare att hitta ett tillförlitligt och smidigt sätt att mäta “kvalitet”…
Länkar
nyhetsrelease
artikeln (utkast, dvs ej publicerad och granskad, via Dartmouth College – fritt tillgänglig)
New Scientist
Andra bloggar om: vetenskap, forskning, internet, wikipedia, open source
Malins blogg. 