Kort svar
Mätfel betyder att ett uppmätt värde inte helt fångar det man egentligen vill veta. Det kan bero på hur måttet definieras, hur data rapporteras, vilka som svarar, hur små grupperna är eller om måttet används för fel fråga.
Mätfel är inte samma sak som fusk
| Begrepp | Betyder |
|---|---|
| Mätfel | värdet fångar inte helt det man vill mäta |
| Slumpvariation | värdet rör sig naturligt mellan grupper eller år |
| Bias | felet går systematiskt åt ett visst håll |
| Fusk | avsiktligt fel, vilket är en annan fråga |
För gymnasievalet betyder mätfel att du ska läsa skolstatistik som signaler, inte som perfekta avbildningar av verkligheten.
Varför mätfel uppstår
Skolstatistik försöker beskriva en verklighet som är komplex. Det är svårt att mäta undervisning, trygghet, studiero, stöd och resultat exakt. Därför används indikatorer. De är användbara, men de fångar bara delar.
Ett mått på studiero bygger till exempel ofta på elevsvar. Det kan påverkas av hur frågan ställs, vilka elever som svarar och vilken period enkäten genomförs. Ett mått på lärarbehörighet kan vara mer registerbaserat, men säger inte allt om hur undervisningen fungerar i ett specifikt klassrum.
Mätfel kan alltså uppstå även när alla gör sitt bästa och datan är seriös.
Mätfel i olika skolmått
Olika mått har olika slags felkällor. Resultatmått påverkas av elevgrupp, programprofil och små grupper. Enkätmått påverkas av svarsfrekvens, urval och dagsläge. Registermått påverkas av rapportering, definitioner och uppdateringstid.
Exempel på felkällor
| Mått | Möjlig felkälla | Praktisk tolkning |
|---|---|---|
| Betygssnitt | programprofil och elevgrupp | jämför helst liknande program |
| Elevnöjdhet | svarsfrekvens och bortfall | se hur starkt underlaget är |
| Lärartäthet | nivå och definition | kontrollera vad måttet avser |
| Skolindex | normalisering och viktning | öppna komponenterna |
Det är därför artikeln om registerdata, statistik och enkätdata är viktig.
Konkret gymnasieexempel
Anta att en skola har ett högt betygssnitt. Du vill veta om undervisningen är stark. Betygssnittet kan vara relevant, men det mäter inte undervisning direkt. Det fångar resultatet efter flera processer: vilka elever som antagits, vilka program skolan har, hur betyg sätts, hur eleverna får stöd och hur årskullen ser ut.
Det betyder att betygssnittet kan innehålla mätfel i förhållande till frågan “hur bra är undervisningen?” Måttet är inte fel, men det svarar inte ensamt på frågan.
Ett bättre sätt är att kombinera betyg med examensgrad, behörighet, elevupplevelse, lärarresurser och skolans egna kvalitetsarbete.
Mätfel och modeller
När flera mått vägs ihop i en modell följer mätfelen med. En modell kan minska vissa problem genom att använda flera indikatorer, men den kan också skapa nya risker om den sammanväger mått som inte passar ihop.
Om ett mått har stor osäkerhet men hög vikt kan det påverka modellen för mycket. Om flera indikatorer mäter nästan samma sak kan modellen överbetona en dimension. Om en indikator saknas för många skolor kan jämförelsen bli ojämn.
Därför behöver modeller visa både värde och underlag.
När du misstänker mätfel, kontrollera:
- vad måttet egentligen definierar
- om värdet gäller rätt nivå
- om källan har ändrat definition
- om måttet används för rätt fråga
Vad betyder det för gymnasievalet?
Mätfel gör inte skolstatistik oanvändbar. Det gör att du behöver översätta siffran till rätt fråga. Om du ser ett högt betygssnitt ska du inte direkt fråga “är undervisningen bäst?”, utan “vad kan betygssnittet bero på och vilka andra mått stödjer bilden?”
För dig som väljer gymnasium är mätfel en påminnelse om att siffror behöver kompletteras med verkliga frågor. Hur fungerar stödet? Hur ser programmet ut? Hur beskriver eleverna studiero? När flera oberoende signaler pekar åt samma håll minskar risken att ett enskilt mätproblem styr hela beslutet.
Det gäller även när siffran kommer från en seriös källa. Källan kan vara stark, men måttet kan ändå vara svagt för just den fråga du försöker besvara.
Vanliga missförstånd
Ett vanligt missförstånd är att mätfel betyder att statistiken inte går att använda. Det stämmer inte. Alla mätningar har begränsningar. Frågan är om du känner till dem.
Ett annat missförstånd är att officiell statistik saknar mätproblem. Officiell statistik har ofta starka kvalitetsprocesser, men även där behöver man läsa definition, nivå och period.
Ett tredje missförstånd är att mätfel alltid är slumpmässigt. Ibland kan felet vara systematiskt. Då närmar vi oss frågan om bias i skoljämförelser.
Nästa steg
Fortsätt med bias i skoljämförelser för att förstå systematiska skevheter. Läs också hur statistik och nyckeltal ska tolkas innan du drar slutsatser av en enskild skolsiffra.