By name: "vetenskapliga-krav-granskningsrapport" description: "Riksrevisionens vetenskapliga krav på granskningsrapporten: de fem grundkriterierna, abduktion, iakttagelse vs slutsats, hedging, kausalitetskrav, språk och form. Använd vid skrivande och opponentgranskning av alla granskningsleveranser." slug: "vetenskapliga-krav-granskningsrapport" metadata: paperclip: slug: "vetenskapliga-krav-granskningsrapport" skillKey: "local/expertbyran/vetenskapliga-krav-granskningsrapport" skillKey: "local/expertbyran/vetenskapliga-krav-granskningsrapport"
key: "local/expertbyran/vetenskapliga-krav-granskningsrapport"
Vetenskapliga krav på granskningsrapporten
En granskningsrapport är ett vetenskapligt argument. Den presenterar empiriska iakttagelser, kopplar dem till normativa bedömningsgrunder och drar slutsatser som håller för kritisk granskning. Denna skill är den auktoritativa sammanfattningen av Riksrevisionens interna instruktion och ska följas vid allt leveransarbete.
De fem grundkriterierna
Alla fem måste vara uppfyllda — de är inte hierarkiska.
| Kriterium | Innebörd |
|---|---|
| Intern validitet | Slutsatserna följer logiskt av iakttagelserna. Alternativa förklaringar har övervägts och uteslutits. |
| Extern validitet | Generaliserbarhet i den utsträckning rapporten påstår. Urvalets begränsningar redovisade. |
| Reliabilitet | Konsistenta och reproducerbara mätningar. Annan granskare skulle komma fram till samma iakttagelser. |
| Transparens | Metod, datakällor, urval och analytiska val fullständigt redovisade. |
| Falsifierbarhet | Frågorna och slutsatserna formulerade så att de i princip kan motbevisas. |
Abduktion — den dominerande slutledningsformen
Effektivitetsrevisionen bygger på abduktiv slutledning: granskaren rör sig från iakttagelser till den bästa förklaringen, snarare än från axiom (deduktion) eller enbart från mönster (induktion).
"Vi iakttar P. Om hypotesen H vore sann, skulle P följa naturligt. Inga andra förklaringar är lika övertygande. Alltså är H sannolikt sann."
Abduktion kräver att granskaren aktivt söker och redovisar de alternativa förklaringar som övervägts och uteslutits.
Metodredovisningen
Ska innehålla:
- Revisionsfrågornas logik — nedbrytning och täckningslogik
- Bedömningsgrundernas ursprung — lag, förordning, regleringsbrev, myndighetsinstruktion, ISSAI-standarder, praxis
- Datakällor — specifika (vilket register, vilka år, hur många intervjuer)
- Urvalslogik — representativt, strategiskt, utfallsbaserat?
- Analysmetod — konkret (kodningsschema, statistiska test)
- Begränsningar och bortfall — öppet redovisade
Triangulering
Samma slutsats stöds av flera oberoende datakällor eller metoder. Det är ett av de viktigaste redskapen för intern validitet.
| Stark triangulering | Svag triangulering — åtgärd |
|---|---|
| Registerdata visar mönstret, intervjuer förklarar mekanismen, dokumentanalys bekräftar att problemet var känt internt | Om bara en metod: redovisa explicit, diskutera vad som inte kan uteslutas |
| Kvantitativa och kvalitativa pekar i samma riktning | Om källorna pekar i olika riktningar: analysera divergensen, dra inte starkare slutsats än evidensen medger |
| Oberoende källor ger samstämmiga iakttagelser | Om data är tunn: gradera slutsatsen ("iakttagelserna indikerar" i stället för "granskningen visar") |
Iakttagelser — strikt deskriptiva
Den viktigaste principen: håll det deskriptiva och det normativa isär.
- Iakttagelse: beskriver ett empiriskt faktum, värdeneutral, verifierbar
- Slutsats: kopplar iakttagelsen till bedömningsgrunden, värderar
Exempel på en iakttagelse:
"Av de 112 granskade ärendena saknades ett skriftligt beslutsdokument i 37 procent av fallen (42 ärenden)."
Motsvarande slutsats (hör hemma i slutsatskapitlet):
"Bristen på skriftliga beslutsdokument innebär att myndigheten inte uppfyller kravet på dokumentation i förvaltningslagen (2017:900) 27 §."
Kvantitativa iakttagelser (4.3)
- Täljare och nämnare alltid: "37 av 112 ärenden (33 procent)" — inte bara "33 procent"
- Osäkerhetsmarginaler vid stickprov
- Tidsperiod explicit
- Ingen falsk precision — heltal om data bara medger heltal
- Jämförbara enheter vid jämförelser
Kvalitativa iakttagelser (4.4)
- Övertolka inte intervjudata: enskilda utsagor är bevis för att uppfattningen finns, inte för att den är korrekt eller representativ
- Aggregerande formuleringar när befogat ("Flertalet av de intervjuade...") + specificera andelen
- Citatselektion representativ, inte illustrativ för gynnsammaste fallet
- Källhänvisa till roll, aldrig till namn
Alternativa förklaringar
- Beskriv vilka som identifierats och hur de prövats
- Om data inte tillåter uteslutande: säg det, sänk slutsatsens styrka
- Om granskningsobjektet anför alternativ: redovisa och förklara
Slutsatser och rekommendationer
Slutsatsens logiska struktur
Tre led, alla explicit:
- Empirisk premiss (iakttagelsen)
- Normativ premiss (bedömningsgrunden)
- Slutledning (bedömningen)
Hedging-skalan
| Evidensnivå | Formulering | Förutsättningar |
|---|---|---|
| Stark | "Granskningen visar att..." | Heltäckande data, triangulering |
| Måttlig | "Granskningen indikerar att..." | God datakvalitet men begränsat urval |
| Försiktig | "Granskningen ger anledning att ifrågasätta om..." | Begränsade data, alternativ kvarstår |
| Öppen fråga | "Granskningen kan inte avgöra om..." | Metodologiska hinder |
Kausalitetskrav
En kausalitetsslutsats kräver fyra komponenter — alla uppfyllda:
- Temporal ordning — orsaken föregår verkan
- Kovariation — samvarierar konsistent med hypotesen
- Eliminering av alternativa förklaringar
- Mekanism — beskriven och belagd
Korrelation räcker aldrig. Post hoc ergo propter hoc är en av de vanligaste bristerna.
Rekommendationerna
- Förankring: varje rekommendation ska kunna spåras till en specifik slutsats
- Mandat: riktad till aktör med rättsligt och praktiskt mandat
- Proportionalitet: styrkan ska motsvara slutsatsens styrka
- Specificitet: ange vad som ska göras, inte bara att något bör förbättras
- Uppföljningsbarhet: formulerad så det går att bedöma om den följts
Systematiska vetenskapliga brister att undvika
| Brist | Åtgärd |
|---|---|
| Bekräftelsebias | Sök aktivt motbevis, redovisa transparent |
| Cirkulär argumentation | Identifiera bedömningsgrund externt, inte från utfallet |
| Ekologisk felslutning | Var explicit om vad data mäter |
| Övertolkning av intervjudata | Redovisa andel av intervjupersoner som delar uppfattning |
| Selektiv precisering | Kalibrera precision konsekvent |
| Post hoc ergo propter hoc | Kontrollera för confounders, undersök mekanism |
| Oproportionerliga rekommendationer | Kalibrera rekommendationens styrka mot slutsatsen |
| Utelämnande av metodbegränsningar | Explicit delkapitel om begränsningar |
Språk och form
Aktiv röst
Passiv röst i iakttagelser döljer ansvar. Undvik.
| Passiv (undvik) | Aktiv (använd) |
|---|---|
| "Uppföljning genomfördes inte." | "Myndigheten genomförde ingen uppföljning." |
| "Dokumentation saknades." | "Handläggarna upprättade inte dokumentation i 37 av 112 ärenden." |
| "Beslut fattades utan underlag." | "Generaldirektören fattade beslut utan föredragningspromemoria i 6 av 8 fall." |
Ord att undvika eller precisera
- "Visar" — stark formulering, förutsätter robust evidens
- "Allvarliga brister" — "allvarliga" är en gradering, motivera
- "Inte tillräckligt" — tillräcklighet förutsätter standard
- "Generellt" / "ofta" / "i stor utsträckning" — ersätt med faktisk kvantifiering
- "Tydligt" / "klart" — visa det, beskriv det inte
- "Bör" — hör hemma i rekommendationer, inte iakttagelser
Konsistent terminologi
Särskilj: effektivitet vs efficiens, mål/resultat/utfall, styrning/ledning/kontroll. Använd exakt samma term för samma fenomen genomgående.
Källhänvisningar
- Specifika (sida, paragraf, datum, diarienummer)
- Intervjuer: till roll, aldrig till namn
- Om en uppgift kommer från granskningsobjektets egen framställning, ska det framgå
Samlad checklista (avsnitt 9)
Metodredovisning:
- Revisionsfrågornas nedbrytning explicit redovisad
- Bedömningsgrundernas ursprung angivna med källhänvisningar
- Samtliga datakällor specificerade
- Urvalets logik och begränsningar redovisade
- Analysmetoden konkret beskriven
- Metodbegränsningar explicit diskuterade
Iakttagelserna:
- Varje iakttagelse källhänvisad
- Iakttagelserna strikt deskriptiva
- Kvantitativa påståenden har täljare, nämnare, tidsperiod
- Representativitet för kvalitativa iakttagelser explicit hanterad
- Alternativa förklaringar prövade och redovisade
- Varje iakttagelse kopplad till bedömningsgrund
Slutsatser och rekommendationer:
- Varje slutsats har empirisk + normativ premiss
- Slutsatsernas formuleringar kalibrerade mot bevisens styrka
- Kausalitetspåståenden stödda av mekanism + eliminering
- Varje rekommendation spårbar till slutsats
- Rekommendationerna riktade till aktörer med mandat
- Styrka proportionerlig mot evidensnivå
Språk, form och sammanfattning:
- Ansvarssubjekt tydligt i iakttagelser
- Kvantifierande adverb ersatta med faktisk kvantifiering
- Centrala begrepp definierade och konsekventa
- Källhänvisningar specifika och verifierbara
- Normativa formuleringar bara i slutsatser och rekommendationer
- Sammanfattningen representativ, kalibrerad, fristående läsbar
Referenser
- Riksrevisionens interna instruktion "Vetenskapliga krav på granskningsrapporten" (underlag för denna skill)
issai-standarder— internationella ramverket (ISSAI 300, 3000)effektivitetsrevision-process— processkopplingenpeer-review-metodik— tillämpning vid opponentarbete