Kort svar
Den största begränsningen med skolstatistik är inte att siffrorna är meningslösa, utan att de är ofullständiga på olika sätt. En siffra kan saknas, bygga på liten grupp, komma från en annan period än du tror eller mäta något smalare än rubriken får det att låta som.
Fyra vanliga begränsningar
| Begränsning | Vad det brukar betyda |
|---|---|
| Saknat värde | Uppgiften finns inte eller visas inte för att underlaget är för svagt |
| Olika perioder | Två värden går inte att jämföra helt rakt av |
| Liten elevgrupp | Ett fåtal elever kan påverka siffran mycket |
| Smalt mått | Siffran säger något viktigt, men långt ifrån allt |
Saknade värden betyder inte automatiskt fel
När en siffra saknas är första impulsen ofta att tänka att sidan är trasig. Ofta är det fel slutsats.
En uppgift kan saknas därför att:
- källan inte publicerar värdet för den skolan
- skolan är ny, liten eller förändrad
- underlaget är för tunt för att visas på ett rimligt sätt
- värdet inte går att beräkna säkert för just den perioden
Det är därför bättre att läsa ett tomt fält som “här saknas tillräckligt underlag” än som “någon har glömt att fylla i”.
Små grupper gör siffror känsliga
Ju mindre elevgrupp, desto försiktigare ska du vara. Ett litet antal elever kan flytta ett snitt tydligt upp eller ned. Det gäller både resultat och enkätmått.
Det här är särskilt viktigt när du tittar på:
- mindre skolor
- nya utbildningar
- smala program eller profiler
- enkätmått där få svar kan ge stor effekt
I sådana lägen är riktningen ofta mer användbar än decimalerna. Du vill se mönster, inte låtsasprecision.
Olika perioder är en verklig begränsning
En av de vanligaste feltolkningarna är att jämföra två värden som om de gällde exakt samma tid. Det gör de inte alltid.
Enkäter kan visa olika senaste period för olika skolor. Resultatstatistik kan bygga på ett annat år än skolregister och lokalt utbud. Det är normalt i en tjänst som hämtar data från flera källor, men det är fortfarande en begränsning du behöver ta hänsyn till.
Det betyder i praktiken:
- jämför inte blint
- läs periodetiketten
- bli mer försiktig om skillnaderna är små
Mått med stark rubrik kan ändå vara smala
Vissa ord låter större än de är. “Elevnöjdhet”, “NPS”, “behörighet” eller “betyg” kan kännas som breda kvalitetsdomar, men varje mått beskriver bara en del av helheten.
Exempel:
- NPS säger något om upplevd nöjdhet, inte allt om undervisning
- betygssnitt säger inget säkert om hur bra stöd du skulle få
- högskolebehörighet säger inte om du trivs på skolan
Det här är en begränsning i själva måtten, inte bara i datakällan.
Förändrade skolor är extra svåra att läsa
Om en skola bytt namn, huvudman, programutbud eller storlek kan äldre statistik bli svårare att tolka. Siffrorna behöver inte vara fel, men de kan beskriva en annan version av skolan än den du möter idag.
Det gäller särskilt om du tittar på historik och ser tydliga hopp mellan perioder. Ibland är hoppet verklig utveckling. Ibland speglar det att underlaget runt skolan förändrats.
Så använder du statistik trots begränsningarna
Begränsningar betyder inte att du ska sluta använda statistiken. Det betyder att du ska använda den mer intelligent.
Ett rimligt arbetssätt är att:
- läsa flera mått tillsammans
- kontrollera period och underlag
- jämföra med skolor som faktiskt liknar varandra
- dubbelkolla sådant som är avgörande för ditt val
Gör du det blir statistik ett bra beslutsstöd, även när den inte är perfekt.