Perspektiv på utvärdering

Förord 11

Förord till fjärde upplagan     12

Läsanvisning 15

 

1. Utvärdering     17

1.1  Vad är utvärdering? 17

1.1.1  Skillnaden mellan utvärdering och uppföljning 19

1.1.2  Skillnaden mellan utvärdering och revision 19

1.1.3  Skillnaden mellan utvärdering och forskning 20

1.2  Utvärderingsfältets utveckling 21

1.2.1  Utvärdering i Sverige 23

1.3  Utvärderingsteori 26

1.4  Centrala begrepp inom utvärdering 28

1.4.1  Formativa och summativa utvärderingar 29

1.4.2  Ex-post-, ex-ante- och mid-term evaluation 30

1.4.3  Aktiviteter, prestationer, effekter och resultat 31

1.4.4 Mål 32

1.4.5  Resultatindikatorer 34

1.4.6  Kausalitet 35

1.4.7  Additionalitet 37

1.4.8  Attribuering och kontribuering 40

1.4.9  Teori- och implementeringsfel 41

1.5  Från teorier till praktik 45

 

2. Att planera och genomföra utvärdering 47

2.1  Varför? 49

2.1.1  Exempel Varför? 51

2.2  Vad? 53

2.2.1  Utvärderingsobjekt 53

2.2.2  Kärnfrågor 54

2.2.3  Värderingskriterier 54

2.2.4  Utvärderingsfrågor 56

2.2.5  Exempel Vad? 57

2.3  Vilka? 60

2.3.1  Vilka berörs av utvärderingen och behöver vi ta hänsyn till dem? 60

2.3.2  Vem ska genomföra utvärderingen? 61

2.3.3  Exempel Vilka? 64

2.4  Hur? 67

2.4.1  Exempel Hur? 70

2.5  Resultat? 74

2.5.1  Tolkning och värdering av utvärderingens resultat 74

2.5.2  Resultatöverföring 76

2.5.3  Exempel Resultat 80

 

3. Utvärderings­modeller 85

3.1  Vad kännetecknar en utvärderingsmodell? 85

3.2  Resultatinriktade modeller 88

3.2.1  Mål- och effektutvärdering 89

3.2.2  Metaanalys 96

3.2.3  Ekonomisk utvärdering 102

3.3  Komparativa utvärderingsmodeller 107

3.3.1  Benchmarking 108

3.3.2  Konstruerad idealmodell 110

3.4  Teoribaserade utvärderingsmodeller 111

3.4.1  Programteori 112

3.4.2  Ramfaktormodell 118

3.5  Aktörsfokuserad utvärdering 121

3.5.1  Brukarorienterad utvärdering 122

3.5.2  Intressentutvärdering 124

3.5.3  Erbjudandemodellen 127

3.6  Några särskilda typer av utvärdering 131

3.6.1  Programutvärdering 131

3.6.2  Effektanalys 136

3.6.3  Självutvärdering och självvärdering 145

3.6.4  Expertpanel 147

3.6.5  Löpande utvärdering och följeforskning 153

 

4. Fyra praktiska exempel 157

4.1  Lokalt brottsförebyggande arbete – ur ett mål- och effektperspektiv 157

4.1.1  Genomförande 158

4.1.2  Värdering och bedömning 160

4.1.3  Mål- och effektperspektivets värde 161

4.2  Utvärdering av universitetsutbildning – ur ett benchmarking-perspektiv 161

4.2.1  Genomförande 162

4.2.2  Värdering och bedömning 164

4.2.3  Benchmarking-perspektivets värde 165

4.3  Utvärdering av ett statligt ungdomsprojekt – ur ett programteoretiskt perspektiv 166

4.3.1  Genomförande 167

4.3.2  Värdering och bedömning 168

4.3.3  Det programteoretiska perspektivets värde 169

4.4  Utvärdering av ett arbetsmiljöprojekt – med stöd av erbjudandemodellen 170

4.4.1  Genomförande 171

4.4.2  Värdering och bedömning 175

4.4.3  Erbjudandemodellens värde 177

 

5. Utvärdering för lärande och utveckling 179

5.1  Användning av utvärderingsresultat 180

5.2  Att skapa förutsättningar för lärande och utveckling 183

5.2.1  Noggranna förberedelser 183

5.2.2  Utvärderarens lärarfunktion 186

5.2.3  Beställarorganisationens medvetna förhållningssätt till utvärdering 189

5.2.4  Användningsorienterad utvärdering192

 

6. Kvalitet i utvärderingar 195

6.1  Kvalitetssäkringsprocesser 196

6.2  Metautvärdering 198

6.3  En modell för systematisk kvalitetsgranskning av utvärderingar 200

6.3.1  Validitet 201

6.3.2  Reliabilitet 203

6.3.3  Användbarhet 204

6.3.4  Ansvarstagande och etiska kriterier 205

6.3.5  Kostnadseffektivitet 206

6.4  Granskningsmodellen i praktiken: möjligheter, begränsningar och utmaningar 208

6.4.1  Hur skall resultatet av en kvalitetsgranskning tolkas? 209

 

7. Perspektiv på utvärdering 213

Bilaga: Formulär för bedömning …|av en utvärderings kvalitet 217

Del 1: Utvärderingens validitet 218

Del 2: Utvärderingens reliabilitet 220

Del 3: Utvärderingens användbarhet 222

Del 4: Ansvarstagande och etiska kriterier 224

Del 5: Kostnadseffektivitet 225

Källförteckning 227

Sakregister 239