Det har uppstått en debatt om rangordningar och kvalitetsmått för svenska kommuner. Ett sätt att förstå utvecklingen är nog att tidskrifter och opinionsinstitut och intresseorganisationer har förstått hur lätt det är att få massor av uppmärksamhet på att kvantifiera och rangordna – men de har inte alltid koll på alla metodproblem som uppstår när man ska mäta välfärd, effektivitet, kvalitet och liknande.
Här är en nyckelpassage från Gissur Erlingssons och Anders Sundells långa inlägg i frågan (en kortversion publicerades på DN-debatt)
Medan Lärarförbundets ranking belönar kommuner som har höga kostnader oavsett resultat, belönar den här rankingen [Dagens Samhälles rankning av landets skolkommuner] kommuner som dels har låga kostnader per elev totalt sett, men också dem som lägger pengar på annat än undervisning: Andel av kostnaden som läggs på undervisning ingår som en insatsfaktor. Givet en viss resultatnivå ökar alltså effektiviteten enligt det här måttet om pengar omfördelas från undervisning till lokaler
Vad gäller Fokus kommunranking, pekar de på att förändringarna i rangordning från år till år tycks drivas av återgång till medelvärdet.
Jag skulle vilja tillfoga två mer fundamentala frågor:
1. Fokus skriver själva att indexet förändras från år till år. “Variabler läggs till och försvinner”. Varför gör man då en stor poäng av att rangordningen förändras från år till år?
I år bytte man ut skilsmässor mot bredbandstillgång, vilket är två tämligen olika fenomen. Förändringen som sådan finns det goda argument för: Det är inte självklart att låga skilsmässotal är något positivt, exempelvis om människor stannat i äktenskap där de vantrivs för att de anses skamligt att skilja sig.
Men hur mycket av de rubrikgenererande förändringar av rangordningen beror på denna metodförändring? Kan det tänkas att Habo i bibelbältet är bättre på att hålla ihop äktenskap än på bredbandstäckning?
Kommunalrådet tycks ha snarlika misstankar (ur Jönköpings-Posten 17 maj):
och – mycket riktigt – på sid 27 bekräftar Fokus Martin Ahlquist orsaken bakom Habos ras. Det är inte bara Habo som missgynnas av att skilsmässor tagits bort ur indexet:
2. Varför lägger Fokus inte ut datafilen med alla underliggande data (likt exempelvis the Guardians data store)?
Det skulle vara en folkbildande välgärning ty då alla kunna se vilka faktorer som förklarar relativa förändringar, man skulle kunna göra nya index och det skulle snabbt visa sig hur stor betydelse metodvalen har.
(Tack till Anders Sundell som skickade mig pdf-filer från Jönköpings-Posten)