Så dokumenterar du utvärderingen så att beslut går att granska

Granskningsbarhet börjar i utvärderingsplanen

Om en utvärdering går att granska i efterhand avgörs inte av rapportens kvalitet, utan av vad som skrevs ned innan arbetet började. Utvärderingsplanen behöver därför låsa fyra saker på förhand: syftet med utvärderingen, frågeställningarna som ska besvaras, kriterierna som ska bedömas och vem som ansvarar för vad. Ändras frågeställningen under arbetet ska ändringen dateras och motiveras i planen — annars syns det inte i efterhand om slutsatserna svarar mot den fråga som faktiskt ställdes.

Att vara utvärderare och att vara granskare är två skilda uppgifter. I kursbeskrivningen för utrednings- och utvärderingsarbete i offentlig förvaltning vid Högskolan i Halmstad beskrivs att deltagarna övar både på att granska en utvärdering av offentlig verksamhet och på att planera en egen utvärdering. Lägg därför in ett moment i planen där någon annan än den som genomför utvärderingen tar ställning till om dokumentationen är tillräcklig.

Dokumentationskravet måste vara konkret: vilka underlag som sparas, i vilket format, var de lagras, hur de namnges och hur länge de behålls. För myndigheter tillkommer Offentlighets- och sekretesslagen (SFS 2009:400), som innehåller bestämmelser om myndigheters och vissa andra organs handläggning vid registrering, utlämnande och övrig hantering av allmänna handlingar. Utvärderingsmaterial som upprättas hos en myndighet kan alltså bli föremål för utlämnandeprövning. Det bör den som lägger upp arbetet och bestämmer vad som skrivs ned var känna till.

I rapporten Utbildning på vetenskaplig grund – otillräckliga insatser för att stödja skolan med kunskap (RiR 2025:31, 13 november 2025) visar Riksrevisionen vad snäva tidsramar får för följder: Skolverkets samarbeten med forskare styrdes av tidsramarna i regeringsuppdragen, snäva tidsramar är ett återkommande problem, forskare tackar ofta nej till att medverka, och de forskare som accepterade villkoren hade inte förutsättningar att göra ett bra arbete. Avsätt därför tid i planen uttryckligen för dokumentation och granskning, inte bara för analys och rapportskrivning.

Dokumentera urval, metod och värdering av underlag

Metoden ska vara nedskriven innan sökningen börjar: vilka källor och databaser som används, vilka sökord och tidsperioder som avgränsar, vilka inklusions- och exklusionskriterier som styr vad som får ingå, och hur dubbletter och dubbelpubliceringar hanteras. Redovisa också bortfallet — hur många träffar som sållades bort och på vilken grund. Utan det går det inte att se om en slutsats beror på urvalet eller på det som faktiskt står i underlaget.

RiR 2025:31 pekar på just denna punkt. Granskningen visar att Skolverket inte ställer krav på att forskare utgår från systematiska litteratursökningar eller dokumenterar hur de gör urval och värderar forskning — något som är vanligt hos andra myndigheter som samarbetar med akademin. Riksrevisionen beskriver samarbetena som ett riskmoment. Kravet på dokumenterad sökning och dokumenterat urval är alltså inte formalia; det är mekanismen som gör det möjligt att bedöma om sammanställningen är fullständig.

Granskningen visar också att Skolinspektionen, Skolverket och Specialpedagogiska skolmyndigheten har haft arbetssätt som medför risk för att kunskapsunderlag baseras på ofullständiga eller subjektiva sammanställningar av forskning, och att Skolverket och SPSM inte haft rutiner som lever upp till de krav på systematik och transparens som följer av en vedertagen internationell standard för forskningssammanställning. Som jämförelse lyfter Riksrevisionen fram Skolforskningsinstitutet, vars systematiska forskningssammanställningar görs i en process som beskrivs som systematisk och transparent. En sådan process fungerar som mall även för mindre utvärderingar: fördefinierade steg, dokumenterade beslut och en spårbar väg från enskild källa till sammanvägd bedömning.

Även en systematisk process behöver granskas kritiskt. Riksrevisionen noterar att Skolforskningsinstitutet ofta använder en metod för att väga samman forskningens resultat som tillåter tolkningar och kreativa inslag. Väger du samman studier eller datakällor ska vägningsregeln därför skrivas ned i förväg — vad som väger tyngre, varför, och vad som händer med slutsatsen om en enskild källa tas bort. Blandar du forskning med erfarenhetsbaserad kunskap behöver även den hanteringen ha en metod: Riksrevisionen konstaterar att varken Skolverket eller SPSM har en metod för att sammanställa erfarenhetsbaserad kunskap från lärarkåren.

Jämförelse av utvärderingsrutiner i svenska myndigheter

Statistik från Riksrevisionens granskning (RiR 2025:31)

Protokollför varje utvärderingskriterium

Bygg utvärderingsprotokollet kriterium för kriterium med samma fältordning varje gång: kriteriets namn och definition, vilket krav eller vilken nivå som gäller, vilket underlag som använts, vilka uppgifter som hämtats ur underlaget, bedömningen, motiveringen till bedömningen och vilka jämförelser som gjorts. Avsluta varje kriterium med en daterad och namngiven ansvarig för bedömningen. Då kan en utomstående följa hur en enskild poäng, betyg eller rangordning uppstod, i stället för att bara se summan.

Inom upphandlingsområdet blir detta tydligt. I en fråga till Upphandlingsmyndighetens frågeportal (publicerad 14 september 2020) beskrivs att flera myndigheter endast redovisar utfallet av utvärderingen vid tilldelning, alltså vilken anbudsgivare som hade det mest ekonomiska anbudet, vilket enligt frågeställaren gör det omöjligt att se hur de olika utvärderingskriterierna uppfylldes eller att jämföra sitt resultat med konkurrenternas. I portalen konstateras att det finns särskilda regler om vad som ska framgå av den individuella rapport som varje upphandlande organisation ska upprätta. Slutsatsen är generellt giltig: redovisas bara slutresultatet försvinner granskningsmöjligheten, även när beslutet i sig är riktigt.

Vid jämförelser mellan alternativ bör protokollet visa vilka uppgifter som ställts mot varandra och på vilken grund skillnader ansetts avgörande. Används en poängsättning ska skalans steg vara definierade i förväg, så att samma underlag ger samma poäng oavsett vem som bedömer. Går bedömningen inte att upprepa med utgångspunkt i protokollet är den inte granskningsbar, hur väl motiverad den än känns för den som gjorde den.

Skapa enhetlig dokumentation från fråga till slutsats

Samla dokumentationen i en gemensam struktur med fasta steg: fråga, metod, underlag, analys, slutsats och eventuella förslag. Varje steg ska kunna läsas fristående men länka vidare — en siffra i slutsatsen ska peka på en beräkning, beräkningen på ett underlag och underlaget på en källhänvisning. Sätt versionsnummer och datum på varje dokument, namnge filer enligt en bestämd konvention och för en enkel ändringslogg över vad som ändrats och varför.

En fallstudie av utvärdering som verktyg inom svensk offentlig förvaltning (Linköpings universitet, 2023) beskriver hur sammanställd dokumentation och annan dokumentation ger en objektiv och strukturerad överblick över vad som har gjorts. Det är själva poängen med den enhetliga strukturen: den enskilda utvärderarens minne av vilka avvägningar som gjordes ska inte behöva rekonstrueras i efterhand.

Ansvaret behöver framgå lika tydligt som innehållet. Beställarrollen är en egen faktor i svensk offentlig förvaltning — en studie vid Göteborgs universitet (2020) om hur beställare kan främja och förbättra utvärderingar utgår från att det beställs en mängd utvärderingar i svensk offentlig förvaltning och att de organisationer som beställer utvärderingar har betydelse för resultatet. Dokumentera därför vem som beställt, vem som genomfört, vem som kvalitetssäkrat och vem som fattat beslut, med datum för varje steg. Det är den kedjan som gör att ett beslut kan härledas till ett underlag även långt senare.

Process för dokumentation från fråga till slutsats

Visualisera och kommunicera så att utomstående kan följa resonemanget

Tabeller och figurer ska vara ingångar till protokollet, inte ersättningar för det. Varje tabell behöver ange vilket urval den bygger på, vilken period den avser, vilken källa uppgifterna kommer från och vilken osäkerhet som finns. Diagram över bedömningar ska visa skalan och vilka kriterier som ligger bakom staplarna, så att läsaren kan gå vidare till motiveringen för ett enskilt kriterium i stället för att fastna i helhetsbilden.

Visualisering och kommunikation är en egen del av utvärderingsarbetet och tas upp i kurserna i utrednings- och utvärderingsarbete i offentlig förvaltning vid Högskolan i Halmstad, tillsammans med att planera och granska utvärderingar. I praktiken innebär det att sammanfattningen skrivs efter protokollet och hänvisar till det, och att förbehåll och avgränsningar står direkt i anslutning till den figur eller slutsats de gäller — inte i ett avsnitt längst bak.

Riksrevisionen pekar i RiR 2025:31 på ett närliggande problem: myndigheternas stöd beskrivs som fragmentiserat och svårt att hitta, vilket försvårar för dem som ska använda det. Samma sak gäller utvärderingar. En läsare som måste söka i flera system efter sökstrategi, beräkningar och protokoll bedömer utvärderingen utifrån det som råkar vara lättillgängligt. En innehållsförteckning med länkar till varje delmoment och en startsida som anger version och datum löser en stor del av det.

Bygger visualiseringen på bilder eller inspelningar från verksamheten behöver rättigheterna kontrolleras. I Danderyds kommuns riktlinjer för säkerhet anges att kraven på begränsning av rätten att fotografera, filma eller spela in ljud varierar beroende på i vilken zon verksamheten bedrivs. Bildmaterial kan därför behöva avidentifieras eller uteslutas, och skälet till det bör stå i dokumentationen.

Kvalitetssäkra dokumentationen före beslut

Gå igenom dokumentationen mot en fast checklista innan beslutet fattas. Fråga för varje punkt om en utomstående granskare med kunskap om området men utan insyn i arbetet kan följa vägen hela vägen: Går utvärderingens fråga och syfte att återfinna i planen, och motsvarar slutsatserna dem? Är kriterierna definierade och skalorna bestämda i förväg? Finns sökstrategi, urval och bortfall dokumenterade med datum? Finns en motivering och en namngiven ansvarig per kriterium? Är beräkningar och vägningar möjliga att upprepa? Är avvägningar, förbehåll och osäkerhet redovisade där de hör hemma? Är versioner, ändringar och beslut daterade?

Frågan om ett annat arbetssätt hade gett ett annat svar är den skarpaste kontrollen. I RiR 2025:31 konstaterar Riksrevisionen att risken med svaga rutiner är att kunskapsunderlag baseras på ofullständiga eller subjektiva sammanställningar, och att myndigheternas rutiner inte säkerställde att stödet vilade på vetenskaplig grund. Översatt till en enskild utvärdering: går det inte att se vilket underlag som valdes bort, går det heller inte att utesluta att bortvalet styrde slutsatsen.

Låt någon utanför utvärderingsgruppen genomföra granskningen och dokumentera den med samma spårbarhet som resten av arbetet — vad som granskades, vilka invändningar som restes och hur de besvarades. Att granska en utvärdering är en egen färdighet vid sidan av att planera och genomföra den, och den blir bara meningsfull om granskningsresultatet sparas tillsammans med utvärderingen. Då finns underlag som visar både vad beslutet byggde på och vilken kontroll det genomgick.

Kontrolllista för granskningsbar dokumentation