Utvärdering - till vilken nytta?
En studie om hur utvärderingar användas och vad som gör dem användbara
Syftet med denna studie är att göra en metaanalys kring användningen av utvärderingen Aktiveringspolitikens Janusansikte. Utvärderingen har genomförts i fyra stadsdelar i Malmö inom ramen för storstadssatsningen.Fokus har legat på att undersöka om resultatet av utvärderingen Aktiveringspolitikens Janusansikte har använts i de utvärderade verksamheterna, samt vilka faktorer som påverkar användande eller icke-användande av utvärderingar.För att analysera vilken typ av användning som har förekommit har Carol H Weiss modell för användning av utvärderingsresultat används. Denna har kombinerats tre förklaringsfaktorer för att försöka förstå varför det sker eller varför det inte sker någon användning av utvärderingsresultat. Dessa faktorer är den personliga faktorn, den kontextuella faktorn och utvärderingsfaktorn.Undersökningen visar att användningen av Aktiveringspolitikens Janusansikte inte varit så utbredd i de undersökta stadsdelarna. Däremot framkommer det en generellt positiv inställning till utvärderingar. Dessa ses som mycket viktiga för att utveckla och förbättra verksamheten. Interaktiv användning av utvärderingar är vanligt, men även användning i förstärkande eller mobiliserande syfte förekommer.Några viktiga faktorer för att utvärderingar skall användas identifieras också. Delaktighet uppges som en utmärkande framgångsfaktor om syftet är att utvärderingens resultat skall användas av den utvärderade verksamheten. Vidare är också en öppenhet, för lärande i organisationen viktigt. Utvärdering är en färskvara och resultaten måste återföras till verksamheten i rätt tid för att de skall vara användbara. Förtroende för utvärderaren och tillförlitligheten till metoden är av största vikt för att utvärderingens resultat inte skall förkastas.Abstract in EnglishThe aim of this study was to do a meta analysis concerning the use of the evaluation Aktiveringspolitikens Janusansikte. The evaluation was done in four district city councils in the municipality of Malmö. These four district city councils are all part of the governmental issued program Storstadssatsningen.The main focus of the study was to investigate if the findings of the evaluation were utilized in the evaluated city councils and what factors influence utilization and non-utilization. Carol H Weiss model for evaluation utilization was used as a base for the analysis. In combination with these three explanatory factors was used to explain use or non-use of evaluation findings. These factors are the personal factor, the contextual factor and the evaluation factor.The study shows that the utilization of the evaluation findings was limited. There was however a general interest and acceptance for evaluations in the studied organisations. Evaluations are considered important tools for the improvement of both the activity offered and the organisational structure. Interactive use is very common but the findings are also used to reinforce prior beliefs and to mobilize support for ideas.A few important factors affecting the use or non use are also identified. Participation is put forth as an important factor if the aim with the evaluation is to have a direct bearing on the activity and the organisation as a whole. An open mind for learning within the organizational structure is also important. The life-span of an evaluation is rather limited, at least with regard to the utilization. Thus the timing of the feed-back is essential. Lastly one should also mention the importance of the personal relations to the evaluator, trust in both the person and his/her methods are necessary for a successful feed-back of the results from the evaluation.