9789151121529

Utvärdering för socionomer TEORI, PRAKTIK OCH VÄRDEBUREN VERKSAMHET

Kajsa Svanevie

Innehåll 1. Inledning: mellan mening och mätbarhet Om boken

11 15

DEL 1 PROFESSION, TEORI OCH METOD

2. Socialt arbete och professionen

21 Socionomen i praktiken: värderingar, kunskap och förändringsarbete 21 Olika organisatoriska arenor 25 Professionsetiska mål och kunskapsbaserad praktik 27 Socionomens roll och ansvar 29 Avslutning 30

3. Sociala interventioner – teori, praktik och relationella mellanrum Vad är en social intervention?

Teoretiska perspektiv Metod Kontext, styrning och ledarskap Avslutning

4. Kvalitet Integrerat och etiskt drivet kvalitetsarbete Avslutning

5. Kunskapsbaserad praktik – en grund för reflekterad och hållbar förändring Tre källor till kunskap Kunskapskällorna och inflätad utvärdering – ett exempel Avslutning

33 33 34 36 36 37 39 39 41

43 44 47 50

6. Brukarinflytande som etisk och kunskapsbaserad grund Brukaren som kompetent och aktiv partner Avslutning

7. Forskningsanvändning som grund för reflekterad och träffsäker praktik En vägledande kompass Forskningsanvändning i praktiken Avslutning

8. Professionellt omdöme och expertis – kunskap i handling Situationsbundet kunnande Avslutning

9. Kunskapsbaserat beslutsfattande och etik Att navigera mellan värden Med brukarens förändringsteori i centrum Hur kan beslutsfattandet och etiken utvärderas?

Avslutning

10. Dokumentation – från administrativt krav till gemensam kunskapsresurs Att fånga det som sker och att få saker att ske Dokumentation utifrån förändringsteori och för inflätad utvärdering AI och teknologi vid dokumentation Avslutning

53 54 56

59 60 61 63 65 65 67 69 69 72 76 77

79 79 82 87 87

DEL 2 UTVÄRDERING

11. Att förstå och utvärdera social förändring Vad är utvärdering och vad är en utvärderingsmodell?

Måluppfyllelseutvärdering Bieffektsutvärdering Målfri utvärdering Experiment Teoribaserad utvärdering

91 92 95 98 100 104 111

Realistisk utvärdering Bemäktigandeutvärdering Dubbelt deltagarorienterad utvärdering Jämförelse av utvärderingsmodellerna Avslutning

12. Inflätad utvärdering utifrån förändringsteori Vad är inflätad utvärdering?

Metateoretiska utgångspunkter En kontextuell modell Förändringsteori: ”kartan” Den inflätade utvärderingen: ”resan” Avslutning

13. Brukarens egen förändringsteori och inflätad utvärdering Fokus på levda sociala mekanismer David – ett exempel på brukarens egen förändringsteori och inflätad utvärdering Från expertstyrt till samproduktivt Förtjänster med inflätad utvärdering: en lärande praktik Avslutning

114 118 122 125 130 133 134 136 141 144 146 150 153 153 155 160 162 163

DEL 3 FALLSTUDIER

14. Inflätad utvärdering i praktiken – två fall Fall 1: ”Jag heter Addo” – en ungdom i riskzon för kriminalitet Fall 2: Socionomen Samis berättelse om inflätad utvärdering Mellan vardag och värld – fall 2 i metateoretiskt ljus Kunskapsbaserad praktik, evidens och dokumentation – fall 2 Avslutning

167 168 181 197 198 199

DEL 4 DATAINSAMLING OCH METODVAL I UTVÄRDERING

15. Datainsamlingsmetoder Kvantitativa metoder Kvalitativa metoder

203 204 210

Dokument- och textanalys Sociometriska metoder Mixade metoder Kreativa metoder Avslutning

215 216 219 225 226

16. Etik Deltagarnas samtycke Skydd av deltagarnas integritet Rättvisa och inkludering Risker och fördelar för deltagarna Ansvar för resultat och användning av resultat Transparens och opartiskhet

17. Utvärderingskvalitet Validitet: Mäter vi det vi avser att mäta?

Reliabilitet: Är resultatet stabilt och reproducerbart?

Generaliserbarhet: Kan resultaten tillämpas på andra grupper eller situationer?

18. Avslutning: att sluta cirkeln kring mening och mätbarhet Slutord: mot framtidens praktik och forskning

229 229 230 230 230 231 231 233 233 233 234 237 238

Referenser

241

Ordlista

247

1 Inledning: mellan mening och mätbarhet En 14-årig flicka rymmer från sitt familjehem. Hon lämnar inte familjehemmet i raseri, inte i panik, utan med den tystnad som kommer när någonting inuti långsamt brustit. Trots stöd från socialtjänsten känner hon sig varken sedd eller förstådd. När hon till slut kommer i kontakt med en kunnig och inkännande socialarbetare förändras något: genom ett tryggt, tillitsfullt bemötande får hon för första gången möjlighet att formulera sin egen berättelse. Små steg leder till att hon återfår sitt hopp, återgår till skolan, knyter vänskapsband och börjar bygga en framtidstro. Men varför fungerade just denna insats, när så många andra tidigare misslyckats? Och hur kan vi veta att det inte bara var en till­fällighet – hur kan vi hitta allmänna förklaringar?

För att besvara frågorna som ställs när det oförklarliga och smärtsamma redan har skett, räcker det inte med statistik eller punktinsatser. Det krävs en djupgående förståelse för och förklaring till hur förändring faktiskt går till – i människors liv, i relationer och i praktiken. Här blir social förändringsteori ett avgörande verktyg. Social förändringsteori ger en förståelse för hur mänskliga processer leder till förändring. Den utgår från att sociala skeenden inte bara kan förklaras genom yttre faktorer (insats, tidpunkt, resurser), utan också genom inre och relationella processer i form av de rörelser som sker i människors förståelse, känslor och handlingsutrymme. Den sociala förändringsteorin h ­ jälper oss på så sätt att synliggöra vilka mekanismer som antas leda till önskade resultat, under vilka omständigheter och varför. I fallet med flickan blir det exempelvis möjligt att spåra hur just det relationella erkännandet, den emotionella lyhördheten och den professionella kontinuiteten var avgörande. När dessa mekanismer samverkar förändras villkoren för flickans egen reflexivitet, det vill säga hennes förmåga att förstå sig själv, sina val och sin framtid. Det är här förändringsteorin hjälper oss att se sambanden mellan inre förskjutningar (hur hon ser sig själv) och yttre förutsättningar (hur systemet möter henne).

Genom social förändringsteori blir det möjligt att inte bara beskriva resultat, utan även förklara varför vissa processer leder till återhämtning, delaktighet eller tillit. Med ett sådant synsätt som grund blir socialt arbete inte en rad åtgärder, utan en praktik av orsakssamband i rörelse där varje möte, beslut 11

Utvärdering för socionomer och struktur påverkar hur människor kan handla och förstå sig själva. Social förändringsteori ger oss därför ett redskap för reflekterande utvärdering och hjälper oss att se att det som verkar litet – ett erkännande, ett lyssnande öra, en närvaro – kan vara det som faktiskt förändrar livets riktning.

Människors livsvillkor formas även i ett komplext samspel mellan individuella erfarenheter, sociala relationer, strukturella villkor och globala trender.

Det sociala arbetets kärna är att verka just här – mitt i dessa sammanflätade verkligheter, där ojämlikhet och exkludering sällan har en enda orsak (Sheppard 2006). För att förstå – och påverka – dessa processer krävs ett flernivåperspektiv: mikro, mellan, makro och globalt. Det är genom att hålla samman dessa nivåer som vi kan förstå hur förändring blir möjlig, men också varför den ibland uteblir (se Pawson 2006; Payne 2021). Det flernivåperspektiv som präglar socialt arbete bygger på förståelsen att mänskliga livsvillkor formas i flera sammanlänkade skikt. Varje nivå bär sina egna mekanismer och villkor, men påverkar samtidigt de andra. Att analysera social förändring kräver därför att vi ser hur följande fyra nivåer samspelar, överlappar och ibland står i konflikt med varandra.1 • Mikronivå avser individens och familjens vardagsliv – de direkta relationerna, känslorna och handlingarna i konkreta situationer. Här ryms upplevelser av trygghet, bemötande, tillit och erkännande. Det är på denna nivå som förändring först blir synlig i människors berättelser och beteenden.

• Mellannivå handlar om nätverk, grupper och organisationer – de arenor där människor samspelar med andra i sin närhet och i välfärdssystemet. Här formas normer, samarbetsmönster och rutiner som antingen kan stödja eller hindra individers möjligheter till delaktighet och återhämtning.

• Makronivå omfattar de strukturer, institutioner och politiska ramar som påverkar det sociala arbetets villkor: lagstiftning, resursfördelning, policyer och samhällsnormer. På denna nivå synliggörs hur ojämlikhet och exkludering reproduceras, men också hur policyflexibilitet och rättighetsbaserade perspektiv kan möjliggöra förändring.

• Global nivå rör de internationella normer, konventioner och kunskapsströmmar som formar förståelsen av mänskliga rättigheter, social rättvisa och professionell etik. FN:s barnkonvention, olika hållbarhetsmål och evidensrörelsens ideal är exempel på globala mekanismer som påverkar lokalt socialt arbete.

1 I boken väljs denna anlysindelning. Det kan vara bra att känna till att indelningen av nivåer kan vara än mer nyanserad. Lennart Lundquist (1984, s. 7) skriver att: ”Möjlig­ heterna till nivåindelning är många och begränsas egentligen bara av analytikerns fantasi. Vad som är klart är väl individen som startpunkt och hela världen som slutpunkt.

Däremellan är det fritt för olika konstruktioner.” Bhaskar & Danermark (2006) gör indelningen: subindivid, individ, mikro, meso, makro, mega och global.

12

1. Inledning: mellan mening och mätbarhet Tillsammans bildar de fyra nivåerna en inflätad helhet, där sociala fenomen inte kan förstås isolerat. Ett barns oro, en familjs utsatthet eller en socialarbetares handlingsutrymme är aldrig bara individuella händelser, utan uttryck för hur relationer, organisationer och samhällsstrukturer möts i vardagen. För att förstå social förändring krävs därför att inte bara se varje nivå för sig, utan att också följa hur rörelser, handlingar och beslut vävs samman mellan nivåerna över tid. Det är just i detta vävda samband mellan mikro-, mellan-, makro- och global nivå som behovet av en inflätad utvärdering uppstår. Den sker inte efteråt, som en slutsummering, utan en sådan utvärdering är en integrerad del av det pro­fessionella arbetet. På så sätt blir utvärdering i denna form en levande, gemensam och reflekterande process, där både teori och erfarenhet samspelar och justeras över tid. Det handlar inte bara om att mäta det mätbara, utan om att förstå och följa det som verkligen gör skillnad – det meningsfulla.

Inflätad utvärdering kan förstås som ett sätt att följa och förstå förändring medan den pågår (se Vedung 2022; Vedung & Dahlberg 2013). Till skillnad från traditionella utvärderingsmodeller, som ofta sker i efterhand och fokuserar på resultat, betonar denna typ av utvärdering processen, sammanhangen och de mekanismer som gör förändring möjlig. Den utgår från att sociala skeenden är flernivåmässiga, det vill säga att mikrohändelser i människors vardag hänger samman med organisatoriska beslut, samhällsstrukturer och globala normer.

Genom att väva samman kvalitativa berättelser (erfarenheter, röster, tolkningar) och kvantitativa indikatorer (mätbara data, förändring över tid) blir det möjligt att se hur olika faktorer samverkar och påverkar varandra. Inflätad utvärdering blir därmed inte en extern kontroll, utan en lärande praktik där professionella, brukare2 och forskningskunskap möts i ett gemensamt försök att förstå hur och varför social förändring sker.

Socialt arbete är mer än metod, även om det ska bedrivas metodiskt. Vid sidan av att vara en vetenskaplig disciplin är det en värdeburen, relationell och samhällsorienterad praktik. Det bär dessutom på ett etiskt uppdrag: att bidra till förbättrade livsvillkor, social rättvisa och förändrade strukturer. Men varje insats utformas i en unik kontext, tillsammans med en unik människa. Det som fungerar för en individ kan vara verkningslöst för en annan. Därför krävs såväl metodisk förankring som stöd i forskning och professionellt omdöme, i ständig dialog med det som faktiskt sker i praktiken (Oscarsson 2009). Samtidigt är det sociala arbetet aldrig fritt svävande. Det påverkas av politiska mål, ekonomiska ramar och administrativa krav. I detta landskap kan utvärdering ses som något 2 Brukare som benämning för en mottagare av välfärdstjänster är ett begrepp som enligt Vedung & Dahlberg (2013) alluderar till någon som har agens, är aktiv och har handlingsförmåga. Jag ansluter mig till detta perspektiv, varför jag i boken konsekvent använder mig av detta begrepp.

13

Utvärdering för socionomer som trycker ner, men också som ett verktyg för att ta tillbaka det professionella handlingsutrymmet. När utvärdering inflätas i praktiken ger det socialarbetaren redskap att inte bara följa upp, utan också påverka: att visa hur relationellt arbete och strukturell förståelse tillsammans kan förändra livsvillkor (se Payne 2021).

Mötet mellan socialt arbete och utvärdering är inte utan spänningar. Det är ett möte mellan engagemang och systematik, mellan närvaro och distans, mellan levd erfarenhet och krav på mätbarhet. Men just i detta möte uppstår också en möjlighet: att förena empati med analys, att använda evidens för att förstärka det som verkligen spelar roll. Utvärdering blir här en nödvändig lins för att förstå hur förändring sker, varför den ibland uteblir och hur insatser kan förbättras över tid (Weiss 1998). Utvärdering är därför inte en teknisk metodfråga, utan en del av den professionella identiteten. En bro mellan teori och praktik, mellan individ och samhälle, mellan kunskap och etik. När den görs medvetet – och inflätat i det vardagliga arbetet – kan utvärdering inte bara stärka det som fungerar, utan också öppna för förändring där det tidigare varit låst. Den kan vara både en kontrollmekanism och ett frigörande redskap. När utvärdering görs på ett levande, deltagarorienterat och etiskt grundat sätt kan den ge tillbaka makt och mening till såväl brukare som professionella.

Men uppgiften är svår. Hur mäter vi det som är meningsbärande? En stärkt självkänsla. En reparerad relation. En nyfunnen framtidstro. Hur säker­ställer vi att vår utvärdering inte reducerar människor till ordlösa siffror, utan fördjupar vår förståelse för deras komplexa liv? Det är just detta denna bok tar sig an: gränslandet mellan mening och mätbarhet. Boken utforskar relationen mellan socialt arbete och utvärdering – som praktik, teori och värdeburen verksamhet. Den undersöker hur vetenskapliga metoder kan användas för att utveckla ett mer lyhört och kunskapsbaserat socialt arbete, utan att förlora dess etiska kompass. Den frågar vad kunskapsbasering egentligen innebär i en värld där sociala problem inte bara är individuella, utan ofta samhälleliga, historiska och ibland globala.

I detta landskap – där struktur möter subjektivitet, där erfarenhet möter forskning – finns potentialen till ett socialt arbete som förstår, förklarar och förändrar. En praktik där teori inte står i motsats till mänsklig erfarenhet, utan formas av den. Där utvärdering inte handlar om kontroll, utan om gemensamt lärande och utveckling. Där det professionella omdömet inte pressas undan av mallar, utan stärks av systematik, reflektion och en levande dialog om vad som faktiskt fungerar, för vem, i vilken kontext och varför. Att arbeta kunskaps­ baserat innebär därför inte att blint följa evidens, utan att skapa den tillsammans. Med brukare, kollegor, forskare och samhällsanalys som medskapare. På så vis kan det sociala arbetet inte bara dokumentera förändring, utan också vara en kraft i att möjliggöra den.

Och flickan då, hon som rymde? Hon bar med sig det annorlundaskap som 14

1. Inledning: mellan mening och mätbarhet aldrig riktigt fick ett språk. Främlingskapet som följde henne mellan hem, skolor och sociala rum. Tårarna som brände bakom ögonlocken när ingen såg. Den hettande skammen på kinderna när hon för tredje gången förlorade sin plats.

För henne blev det inte ett särskilt program, en ny metod eller en särskild behandling som vände allt, utan i första hand en människa som såg, lyssnade och vågade stanna kvar. Men det var inte bara tur. Det var relationell professionalitet och en klangbotten i vetenskap och beprövad erfarenhet. Det var ett omsorgsfullt förhållningssätt, förankrat i forskning om trauma, tillit, emotionell trygghet och ungdomars självbestämmande. Det var ett exempel på kunskapsbaserat socialt arbete, där såväl flickans egen erfarenhet som pro­fessionell erfarenhet, vetenskap och etik fick samspela, i praktiken (se Oscarsson 2009). Det som fungerade kunde identifieras, följas upp och förstås – ja, till och med förklaras.

Inte som en slump, utan som en process där mening, metodik och människa fick mötas – genom utvärdering.

Att arbeta kunskapsbaserat i socialt arbete är därför att ta ansvar, inte bara för det vi gör, utan för varför vi gör det. För vilka berättelser vi lyssnar till. För vilka förändringar vi ser som möjliga. För hur vi väljer att förstå och förklara det som sker – och det som uteblir. Det är ett arbete som kräver både hjärta och hjärna, både närvaro och analys. Det är också ett arbete som bär flickans röst vidare. Nästa gång någon säger ”det fungerade inte”, kan vi då svara: ”Låt oss ta reda på varför; låt oss skapa kunskap.” Och kanske, tillsammans, skapa en förändring som består.

Om boken Den här boken hjälper dig som socionom, student eller beslutsfattare att förstå och använda utvärdering som ett verktyg för verklig förändring. Du som läsare får en översikt över professionens grund och centrala utvärderingsmodeller samt en fördjupning i inflätad utvärdering med brukarens egen förändringsteori i centrum. Genom praktiska exempel, konkreta metoder och fallstudier visas hur vardagens erfarenheter kan växa till kunskap – och bidra till ett mer hållbart, mänskligt och kunskapsbaserat socialt arbete.

Utvärdering för socionomer – teori, praktik och värdeburen verksamhet tar sin utgångspunkt i en fördjupad förståelse av socialt arbete och introducerar, med denna förståelse som fond, ett urval centrala modeller för utvärdering. Inget tillvägagångssätt är universellt överlägset, därför betonas ett pragmatiskt perspektiv där modellval anpassas efter situation, syfte och värdegrund. Boken beskriver också en mångfald av datainsamlingsmetoder som kan användas flexibelt beroende på utvärderingens syfte och vald utvärderingsmodell, från kvalitativa berättelser till kvantitativa indikatorer. Särskilt fokus riktas mot flernivåbaserad förändringsteori – i synnerhet brukarens egen – och inflätad utvärdering. Dessa 15

5 Kunskapsbaserad praktik – en grund för reflekterad och hållbar förändring En socialarbetare möter en ensamstående mamma som nyligen blivit av med sitt arbete. Hon är utmattad, har tappat hoppet och har svårt att ta emot stöd.

I samtalet säger hon tyst: ”Det känns som att jag inte har något kvar att ge mina barn.” Den professionella stannar upp – inte bara som ett lyssnande öra, utan som en aktiv medaktör. Vilket stöd kan faktiskt göra skillnad här, på riktigt?

Hur vet vi vad som fungerar, och hur vet vi att det vi gör är rätt? Hur kan vi förstå både situationens komplexitet och kvinnans egna resurser, utan att förenkla, förminska eller övervältra? Det är i just sådana ögonblick som behovet av kunskapsbaserad praktik i socialt arbete blir tydligt – inte som en abstrakt policy eller ett krav från organisationen, utan som en praktisk och etisk nödvändighet.

När livet gör ont, när resurserna är begränsade och när människors tillit till samhället vacklar, måste professionella beslut vila på mer än erfarenhet eller goda intentioner.

Kunskapsbaserad praktik (KBP) har vuxit fram som en central grund i socialt arbete – inte som en yttre föreskrift, utan som ett svar på professionens egna frågor: Hur kan vi veta att det vi gör verkligen gör skillnad? Hur kan vi förena människors erfarenheter med forskningsresultat, professionell erfarenhet och systematisk utvärdering? Kapitlet ger en introduktion till KBP:s teoretiska grund, dess praktiska tillämpning och dess betydelse i ett svenskt socialt arbete som vilar på både lagkrav och yrkesetiska principer. Innehållet vilar på följande källor vid sidan av särskilt angivna referenser: • Anders Bergmark, Åke Bergmark och Tommy Lundström (2011). Evidens­ baserat socialt arbete: teori, kritik, praktik. Stockholm: Natur & Kultur.

• Lars Oscarsson (2009). Evidensbaserad praktik inom socialtjänsten – en introduk­ tion för praktiker, chefer, politiker och studenter. Stockholm: SKL Kommentus.

• Liz Trinder och Shirley Reynolds (red.) (2000). Evidence-based practice – a critical appraisal. Oxford: Blackwell Publishing.

43

Utvärdering för socionomer

Tre källor till kunskap KBP är ett förhållningssätt som stärker det professionella omdömet, inte ersätter det. I ett svenskt sammanhang är det dock inte bara en fråga om professionalitet, utan även ett lagkrav. Socialtjänstlagen betonar att insatser ska vila på vetenskap och beprövad erfarenhet (5 kap. 1 §), och det yrkesetiska ramverket för socionomer lyfter fram vikten av att förena teori, praktik och utvärdering i det dagliga arbetet (Akademikerförbundet SSR 2017). Den teoretiska grunden för KBP är pragmatisk: kunskap betraktas som situationsbunden, föränderlig och alltid prövbar i praktiken. Det innebär att sociala interventioner utvecklas i en cyklisk process av planering, genomförande, utvärdering och revidering (Gray m.fl. 2009; Mullen m.fl. 2005). I praktiken handlar det om att i varje möte och varje insats integrera tre källor till kunskap (Oscarsson 2009; Reynolds 2000): 1. Brukarens erfarenheter, mål och livssammanhang: Vad vet personen själv om sina behov, hinder och resurser?

2. Bästa tillgängliga forskning: Vad visar evidens om vad som fungerar i liknande situationer?

3. Professionell expertis: Vad säger erfarenheten, intuitionen och den yrkes­ etiska kompassen?

Det är i skärningspunkten mellan dessa tre kunskapskällor som KBP får sin kraft – och sin ödmjukhet. Den hjälper oss att inte fastna i slentrian eller ”magkänsla”, men också att inte gömma oss bakom statistik eller manualer.

Det handlar inte om att följa mallar, utan om att forma dem – i nära dialog med den det sociala arbetet är till för: brukaren. I mötet med kvinnan som tappat hoppet, som beskrevs i kapitlets inledning, blir det kunskapsbaserade arbetssättet ett sätt att både bekräfta hennes känsla och söka vägar framåt. Vi kan ställa frågor som: Vilka insatser har hjälpt andra i liknande situationer?

Hur kan vi skapa trygghet här och nu, men också bygga långsiktig egenmakt?

Vad behöver utvärderas för att vi ska veta om det vi gör faktiskt fungerar – för henne? KBP blir därmed inte bara en fråga om vad vi gör, utan hur, varför och för vems skull. Det är en praktik som inte nöjer sig med goda intentioner, utan kräver öppenhet, nyfikenhet och ständig lärande. En praktik som sätter människors erfarenheter i centrum – men alltid i relation till forskning, profession och samhällsuppdrag (Odbratt & Tunbjörk 2003; Svanevie 2013).

Brukarens erfarenheter och preferenser, den första kunskapskällan, utgör en bärande del av KBP för att öka både träffsäkerhet och rättssäkerhet (se kapitel 6).

När brukaren involveras i planering och uppföljning ökar chansen att insatsen upplevs som relevant och meningsfull, vilket i sin tur ökar effekten. Vi tänker oss ett fiktivt exempel: I ett projekt riktat till unga kvinnor i hedersrelaterade 44

5. Kunskapsbaserad praktik … kontexter visade det sig att en-till-en-samtal med kvinnlig personal upplevdes som tryggare än gruppverksamhet. Denna feedback förändrade hela insatsens upplägg, något som inte hade skett utan systematisk brukaråterkoppling.

Forskningsbaserad evidens, den andra kunskapskällan, är den vetenskapliga grundpelaren i KBP och inkluderar både kvantitativa och kvalitativa studier (se kapitel 7). När socialt arbete baseras på forskning krävs praktikrelevanta frågor som styr sökandet efter och tolkningen av forskningsunderlaget (Socialstyrelsen 2020). Ett första steg är att klargöra problem- och behovsanalys. Vad är problemet? Vilka grupper berörs? Vilka riskfaktorer eller skyddsmekanismer är inblandade? Vad fungerar? (Se Bergmark 2015.) Om problemet är akut – exempelvis våld i nära relationer – är snabbverkande krisinsatser relevanta. Vid långsiktiga utmaningar, som arbetslöshet bland långtidsarbetslösa unga, krävs metoder med fokus på motivation och meningsfull sysselsättning.

Den professionella erfarenheten, den tredje kunskapskällan, fungerar som en nödvändig tolkningsram – den hjälper till att översätta forskning till praktiskt handlande (se kapitel 8). Kollegiala samtal, handledning och reflekterande team är viktiga forum där erfarenheter kan vägas mot ny kunskap. Exempelvis kan forskning visa att familjeterapi har god effekt vid konflikter mellan föräldrar och tonåringar, men det är socialarbetarens erfarenhet som avgör om metoden passar just den familjen – utifrån relationer, kultur och tillit.

Sammanfattningsvis kan KBP betraktas som ett sammanhängande förhållningssätt där brukarens perspektiv, forskningsbaserad kunskap och beprövad erfarenhet samspelar. Genom att göra detta till en integrerad del av det dagliga arbetet – snarare än ett separat projekt – skapas en praxis som inte bara är mer effektiv, utan också mer rättvis, inkluderande och legitimerad. Den kunskapsbaserade praktikens styrka ligger just i dess förmåga att hantera komplexitet, främja kontinuerlig förbättring och säkerställa att sociala insatser gör verklig skillnad i människors liv. Utvärderingen hjälper oss att ta reda på om, hur och varför skillnaden uppnåtts – eller inte. Den ger oss beprövad erfarenhet (se avsnittet ”Professionsetiska mål och kunskapsbaserad praktik” i kapitel 2).

Låt oss återigen anknyta till kvinnan i kapitlets inledning. När samtalet med kvinnan går mot sitt slut, är hennes röst fortfarande skör – men något har förändrats. Kanske är det inte lösningen som är på plats än, men en öppning har uppstått. Den professionella har inte erbjudit snabba svar, men har lyssnat med både hjärta och metod, med empati och analys. Det stöd som nu växer fram är inte valt på måfå, utan grundat i forskning, erfarenhet och ett respektfullt utforskande av vad kvinnan själv behöver. I just detta ligger styrkan i KBP. Det handlar inte bara om att veta vad som fungerar, utan om att hela tiden vara nyfiken på varför det fungerar. Vad är det i mötet, metoden eller sammanhanget som gör skillnad? Och lika viktigt: Vad händer när det inte fungerar? Vilka mekanismer uteblev, och hur kan vi tänka om, justera, göra bättre? Det är här 45

Utvärdering för socionomer lärandet uppstår – inte som en teknisk uppföljning i efterhand, utan som en levande, reflekterande del av det sociala arbetet.

Att arbeta kunskapsbaserat innebär därför inte att mekaniskt följa manualer, utan att delta i en pågående kunskapsprocess. Det är ett sätt att orka stå kvar i komplexiteten utan att tappa riktningen mot målen. Ett sätt att kombinera mänsklig närvaro med systematik, och att låta varje möte med en människa bli en möjlighet att både hjälpa och lära. För i grunden är det just detta som är det sociala arbetets kärna: att göra verklig skillnad i människors liv – och att ständigt fördjupa vår förståelse för hur och varför den skillnaden uppstår.

Ett nytt förhållningssätt En central förändring i jämförelse med tidigare är ambitionen att genom en praktik som är kunskapsbaserad ”öppna den svarta lådan” – att inte bara mäta om en insats fungerar, utan också förstå hur och varför. Denna förståelse är avgörande för att förbättra arbetet och göra anpassningar vid behov. Det innebär att inte bara följa resultat, utan även processer: Hur lång tid tog det innan effekterna uppstod? Hur påverkades brukaren under insatsens gång? Vilka delar var mest betydelsefulla?

I en studie argumenterar jag för att det har skett en tydlig förskjutning inom socialt arbete – från en praktik som tidigare i hög grad vilade på goda intentioner, personlig erfarenhet och professionell intuition, till ett mer systematiserat och kunskapsbaserat förhållningssätt (Svanevie 2011). I det äldre synsättet betraktades sådana faktorer som tillräckliga för att motivera insatser, medan det nya perspektivet betonar att dessa visserligen är nödvändiga, men inte tillräckliga. För att uppnå en välfungerande praktik krävs också en aktiv integrering av vetenskapliga rön, strukturerad utvärdering och ett kritiskt förhållningssätt till den egna praktiken.

Föreställningen att socialt arbete inte går att mäta har också utmanats. I dag finns en bredare förståelse för att både individuella och samhälleliga resultat kan och bör följas upp. Detta har förskjutit fokus från att enbart notera symtom till att söka bakomliggande orsaker – och från att bedöma goda intentioner till att faktiskt utvärdera konsekvenser. Genom detta har relationen mellan insats och resultat blivit tydligare, inte minst tack vare viljan att ”öppna den svarta lådan”: att undersöka hur en insats verkar, för vem, under vilka omständigheter och varför.

Figur 5.1 illustrerar denna perspektivförskjutning så som jag sammanfattar den.

Denna utveckling har gjort det möjligt att ta större ansvar för resultat, samtidigt som arbetet blivit mer öppet för justeringar, anpassningar och innovation.

I stället för att se evidens och utvärdering som något hotande eller byråkratiskt, betonas nu dess roll som stöd för lärande, etisk reflektion och professionell utveckling.

46

11 Att förstå och utvärdera social förändring När rubrikerna i lokalpressen skriker ”Vårdkaos! Äldre lämnas utan omsorg!”, medan boendepersonal kämpar för fullt bakom kulisserna, blir utvärdering plötsligt allas verklighet. Anhöriga kräver svar, chefer blir kallade till möten och den allmänna ilskan ökar. Men parallellt med detta stora mediala drev finns en annan, tystare signal: på ett hem för vård eller boende (HVB) för ensamkommande ungdomar hittar en ur personalen en liten lapp liggande på ett bord i ett rum. Lappen lyder: ”Jag undrar om någon någonsin ser mig som mer än mitt namn.” Texten på lappen är en smula utsuddad – kanske av tårar – och kvarlämnad under natten.

Utvärdering i socialt arbete är mer än ett svar på mediedrev eller krav från beslutsfattare. Den är ett verktyg för att förstå, lära och förbättra, och den är lika relevant i den stora samhällsdebatten som i de små, tysta tecknen på behov, som den lilla lappen på ett HVB-hem. Genom systematisk insamling och analys av information kan vi bedöma hur väl en insats svarar mot mål, behov och förväntningar, men också få syn på det som annars riskerar att förbli dolt.

För att detta arbete ska vara möjligt krävs modeller – strukturer som hjälper oss att bestämma vilka frågor vi ställer, vilka data vi samlar in och hur resultaten ska tolkas. Utvärderingsmodeller fungerar som kartor eller glasögon: de avgör vad vi ser och hur vi förstår det vi ser. Att välja modell är därför inte en neutral teknisk fråga, utan en värderingsfråga som avgör vad som lyfts fram och vad som riskerar att osynliggöras.

Syftet med detta kapitel är att ge en översikt över några av de vanligaste utvärderingsmodellerna inom socialt arbete. Sammanställningen bygger i huvudsak på följande källor: • Bengt G. Eriksson och Per-Åke Karlsson (2022). Att utvärdera välfärdsarbete (3 uppl.). Malmö: Gleerups.

• Björn Blom, Stefan Morén och Lennart Nygren (red.) (2020). Utvärdering i socialt arbete: utgångspunkter, modeller och användning (2 uppl.). Stockholm: Natur & Kultur.

• Bo Sandberg och Sven Faugert (2020). Perspektiv på utvärdering (4 uppl.).

Lund: Studentlitteratur.

91

Utvärdering för socionomer • Evert Vedung (2009). Utvärdering i politik och förvaltning (3 uppl.). Lund: Studentlitteratur.

• Hanne Kathrine Krogstrup (2017). Utvärderingsmodeller. Lund: Studentlitteratur.

Vad är utvärdering och vad är en utvärderingsmodell?

Utvärdering i socialt arbete är en noggrann bedömning av insatser, verksamheter eller program i syfte att förstå deras värde, funktion och betydelse (se Vedung 2009). Det handlar inte enbart om att kontrollera resultat eller uppfylla administrativa krav, utan om att systematiskt samla in, analysera och tolka information för att kunna fatta välgrundade beslut. En utvärdering kan belysa såväl måluppfyllelse och de processer som leder fram till målen, som de villkor som påverkar möjligheterna att nå dem, men den kan också identifiera effekter vid sidan av mål. På så sätt blir utvärdering ett verktyg för lärande, utveckling och ansvarstagande, och ett centralt element i en kunskapsbaserad praktik.

Utvärdering är ett så kallat process–produktbegrepp eftersom den både avser själva genomförandet och slutprodukten (Vedung 2021).

För att genomföra en utvärdering behövs en teoretisk och metodisk struktur, och det är här utvärderingsmodeller kommer in. En utvärderingsmodell kan beskrivas som en karta eller en uppsättning glasögon som styr blicken: den definierar vilka frågor som ställs, vilka data som samlas in, hur resultaten tolkas och hur de ska användas. Modellen ger ramar för att avgöra vad som räknas som ett relevant resultat och på vilket sätt vi bedömer om en insats är framgångsrik.

Olika modeller bygger på olika antaganden och värden (House & Howe 1999). Vissa fokuserar på mätbara mål och effekter, andra på processer, delaktighet eller kontext. Valet av modell är därför inte neutralt: det avgör vad som blir synligt och vad som riskerar att osynliggöras. En måluppfyllelsemodell kan till exempel tydliggöra i vilken grad satta mål uppnås, medan en realistisk modell kan visa varför en insats fungerar i vissa sammanhang men inte i andra.

Några av de mest använda modellerna i socialt arbete som vi ska titta närmare på är: måluppfyllelseutvärdering, bieffektsutvärdering, målfri utvärdering, experiment (inklusive enskilt systemupplägg), teoribaserad utvärdering, realistisk utvärdering, bemäktigandeutvärdering samt dubbelt deltagarorienterad utvärdering. Tillsammans erbjuder de en bred palett av perspektiv och verktyg för att förstå och utveckla verksamheter. Ingen modell är universellt överlägsen, men var och en bidrar med unika styrkor. Därför blir det ofta en fråga om att välja modell utifrån syftet med utvärderingen, den kontext där den genomförs och de värden som verksamheten vilar på.

92

11. Att förstå och utvärdera social förändring • Måluppfyllelseutvärdering är lämplig när det finns tydliga, uppsatta mål.

Den centrala frågan är: I vilken utsträckning har vi nått det vi planerade?

• Bieffektsutvärdering används med fördel när man vill undersöka konsekvenser utöver de avsedda målen. Frågeställningen är: Vilka oväntade eller oavsiktliga effekter har insatsen lett till, såväl positiva som negativa?

• Målfri utvärdering passar när man vill undvika att låsa sig vid förutbestämda mål och i stället upptäcka oväntade effekter. Frågan blir: Vilka konsekvenser har insatsen fått – avsedda och oavsedda?

• Experiment används när man behöver veta om en insats faktiskt orsakar en viss förändring. Kärnfrågan är: Beror den observerade förändringen på just denna insats?

• Teoribaserad utvärdering är användbar när man vill synliggöra de antaganden som styr en insats. Frågan blir: Hur är insatsen tänkt att fungera – och fungerar den på det sättet i praktiken?

• Realistisk utvärdering passar när man vill förstå komplexa insatser i olika sammanhang. Den centrala frågan är: Vad fungerar, för vem, i vilken kontext och varför?

• Bemäktigandeutvärdering lämpar sig när syftet är att stärka brukarens egenmakt. Frågan är: Hur kan utvärderingen bidra till att brukaren själv formulerar, driver och utvärderar förändring?

• Dubbelt deltagarorienterad utvärdering används när man vill ge förutsättningar för samskapande mellan brukare, professionella och forskare. Frågan blir: Hur kan alla berörda (deltagande) vara delaktiga i att definiera mål, metoder och resultat?

Att förstå skillnaderna mellan dessa modeller – och hur de kan kombineras – är en förutsättning för att använda utvärdering på ett sätt som inte bara granskar, utan också stärker socialt arbete (Mark m.fl. 2000). I kapitlet introduceras modellerna närmare, tillsammans med praktiska exempel från socialt arbete.

I kapitel 12 kommer ytterligare en modell att tillfogas smörgåsbordet av modeller, nämligen inflätad utvärdering utifrån förändringsteori. Det ska visa sig att denna modell hämtar element från övriga modeller.

Exempel: Fallet med den 14-åriga flickan på rymmen I bokens inledning mötte vi en flicka som hade rymt från ett familjehem. Hon lämnade inte i panik, utan med den tystnad som följer när något långsamt har brustit inuti. Först i mötet med en lyhörd socialarbetare kunde hon börja formulera sin berättelse, återfå tillit och steg för steg bygga en framtidstro. Detta exempel kan användas för att belysa hur de olika utvärderingsmodellerna riktar blicken mot olika delar av samma verklighet.

93

Utvärdering för socionomer En måluppfyllelseutvärdering skulle fråga om insatsen uppnådde sina mål, till exempel förbättrad skolnärvaro och stärkt psykisk hälsa. En bieffektsut­ värdering skulle ta reda på om insatsen ledde till några oväntade effekter vid sidan av målen, till exempel ökad framtidstro eller en stärkt självkänsla. En målfri utvärdering skulle i stället undersöka vilka förändringar som faktiskt skedde, även sådant som inte var förutbestämt. Ett experiment (och då framför allt genom enskilt systemupplägg) skulle fokusera på effekter: Var det just en specifik metod som skapade förändring, eller samspelade andra faktorer?

En teoribaserad utvärdering skulle på en individnivå synliggöra de så kallade ”om–så”-antaganden som bär upp insatsen: om flickan får en trygg och stabil relation, så ökar hennes tillit och motivation att gå i skolan. En realistisk utvär­ dering skulle fråga vad som fungerar, för vem, under vilka villkor – och varför just här. En bemäktigandeutvärdering skulle lyfta flickans egen röst: Upplever hon sig delaktig i att formulera mål och beskriva sin utveckling? En dubbelt deltagarorienterad utvärdering skulle samla flickan, andra ungdomar, personal och forskare i en gemensam dialog om vad som faktiskt kan göra skillnad och en idé om utvärderingens upplägg och genomförande.

På gruppnivå kan samma modeller användas för att förstå verksamheten i stort. Måluppfyllelseutvärderingen kan visa om HVB-hemmet når sina övergripande mål för ungdomars trygghet och skolgång. Bieffektsutvärdering fokuserar både på effekter relaterade till mål och på effekter utöver målen. En målfri utvärdering kan upptäcka oväntade effekter, positiva som negativa.

Ett experiment kan undersöka om en viss metodik faktiskt leder till önskade resultat (mätbara effekter). Till exempel kan en grupp ungdomar som får stöd enligt en strukturerad samtalsmetodik jämföras med en grupp som får ordinarie insatser. En realistisk eller teoribaserad ansats kan analysera varför vissa ungdomar utvecklas positivt i miljön medan andra inte gör det, och under vilka villkor dessa skillnader uppstår. Bemäktigande- och dubbelt deltagarorienterade utvärderingar kan bidra till att ungdomarnas egna erfarenheter blir en del av verksamhetsutvecklingen.

Tillsammans visar dessa perspektiv att ingen modell ensam kan fånga hela komplexiteten i socialt arbete. För att förstå både enskilda ungdomars berättelser och kollektiva mönster på ett HVB-hem behöver modellerna kombineras. På så vis kan utvärdering bli mer än ett kontrollinstrument: den kan synliggöra de mekanismer och villkor som gör social förändring möjlig – och samtidigt stärka såväl individens röst som professionens utveckling. Efter detta avstamp följer nu en mer ingående genomlysning av respektive modell, med andra exempel från socialt arbete.

94

15 Datainsamlingsmetoder Oavsett vilken utvärderingsmodell som används är valet av datainsamlingsmetod en kärnfråga (Weiss 1998). Datainsamlingsmetoden utgör den teknik eller strategi som används för att systematiskt samla in, analysera och tolka information om en social insats, ett program eller en intervention. Valet av metod är mer än en teknisk fråga: det är avgörande för att resultaten ska bli tillförlitliga, relevanta och meningsfulla – såväl för praktiker och forskare som för de personer som berörs av insatserna. Olika utvärderingsmodeller bygger på skilda metodologiska ansatser, vilket innebär att metodvalet alltid måste kopplas till utvärderingens syfte, den teoretiska referensramen och de praktiska förutsättningarna i det aktuella sammanhanget (Eriksson & Karlsson 2022; Krogstrup 2017).

I en inflätad utvärdering – där utvärderingen integreras i den pågående verksamheten och sker parallellt med de insatser som studeras – blir metodvalet särskilt pragmatiskt (Kazi 2003; Vedung & Dahlberg 2013). Här handlar det om att hitta en balans mellan noggrannhet och genomförbarhet, mellan struktur och flexibilitet. Praktiskt kan det innebära att kombinera standardiserade mätinstrument med deltagande observationer, eller att använda befintlig dokumentation som komplement till nyinsamlade data. Syftet är att fånga både resultat och process, och att se till att utvärderingen speglar den verklighet som individerna själva lever i.

Kapitlet inleds med en presentation av kvantitativa metoder, med fokus på enkätundersökningar, observationer och systematiska bedömningsinstrument.

Därefter följer kvalitativa metoder – intervjuer, deltagande observation och fokusgrupper – med särskild betoning på hur dessa kan ge djup, kontext och förståelse för upplevelser. Dokument- och textanalys samt sociometriska metoder, som används för att kartlägga relationer och interaktionsmönster i grupper, behandlas separat. Kapitlet fortsätter med ett avsnitt om mixade metoder, där kvantitativa och kvalitativa ansatser kombineras för att ge en rikare och mer nyanserad bild av de sociala fenomen som studeras. Vi stannar slutligen upp vid att även andra typer av underlag kan användas som går utöver de konventionella ramarna. Vid utvärdering kan kreativa uttryck, som ett barns teckning, tonåringens dikt eller ett stycke musik, också ha något att berätta – och kan visa på en förändring över tid. Det är något som traditionell metodlitteratur 203

Utvärdering för socionomer vanligen förbiser. Genomgående kopplas metodvalen till praktiskt socialt arbete och etiska överväganden: metoder ska inte bara mäta, utan också synliggöra erfarenheter, resurser och hinder som är viktiga för de personer som insatserna berör. Detta gör det möjligt att bedriva en kunskapsbaserad, situationsanpassad och etiskt medveten utvärdering, där både vetenskaplig stringens och mänsklig förståelse står i centrum.

Framställningen bygger huvudsakligen på fyra centrala källor, och exemplifieras i kapitlet genom praktiska tillämpningar inom socialt arbete: • Alan Bryman, Tom Clark, Liam Forster och Luke Sloan (2025). Brymans samhällsvetenskapliga metoder (5 uppl.). Stockholm: Liber.

• Dag Ingvar Jacobsen (2024). Hur genomför man undersökningar? Introduktion till samhällsvetenskapliga metoder (3 uppl.). Lund: Studentlitteratur.

• Gustav Lidén (2023). Att använda mixade metoder: en introduktion. Lund: Studentlitteratur.

• Socialstyrelsen (u.å.). Metodguiden för socialt arbete. https://www.socialstyrelsen.se/kunskapsstod-och-regler/omraden/evidensbaserad-praktik/metodguiden/

Kvantitativa metoder Kvantitativa metoder syftar till att samla in numerisk och mätbar information som kan analyseras statistiskt. Dessa metoder används främst när det är viktigt att resultatet ska kunna generaliseras till en större population eller när man eftersträvar objektiva data som kan jämföras över tid och mellan olika grupper.

Typiska kännetecken för kvantitativa metoder är att de bygger på strukturerade och standardiserade insamlingsverktyg, såsom enkäter, frågeformulär eller registerdata. Frågorna är ofta fasta och stängda: svarsalternativen är fördefinierade och möjliggör enkel bearbetning av stora datamängder. Detta gör det möjligt att identifiera mönster och samband mellan olika variabler samt upptäcka statistiskt signifikanta skillnader eller trender. Signifikanta skillnader avser situationer där skillnader mellan grupper eller tidpunkter är tillräckligt stora för att statistiskt kunna utesluta att de uppstått av en slump. Trender syftar på förändringar eller mönster som utvecklas över tid, exempelvis ökande eller minskande nivåer av ett visst fenomen. Dessa metoder ger alltså möjlighet att dra slutsatser om generaliserbara skillnader och utvecklingar i populationer.

En fördel med kvantitativa metoder är just möjligheten att samla in data från många personer på relativt kort tid, vilket ökar resultatens tillförlitlighet och gör det möjligt att dra slutsatser om större grupper. Metoden lämpar sig därför särskilt väl för undersökningar där representativitet är viktig, exempelvis nationella hälsoundersökningar, opinionsmätningar eller utvärderingar av ut204

15. Datainsamlingsmetoder bildningsinsatser. Men kvantitativa metoder används inte bara för att beskriva hur vanligt ett fenomen är, utan även för att testa hypoteser och skapa underlag för vidare analys. Genom statistiska modeller kan forskaren kontrollera för olika bakgrundsfaktorer och undersöka kausala samband. Det betyder att utvärderaren med hjälp av statistiska modeller kan ta hänsyn till faktorer som kan påverka resultatet, till exempel ålder, kön, utbildning eller tidigare erfarenheter, så att effekten av den faktor man är intresserad av kan isoleras. På så sätt blir det tydligare om ett samband är av orsak–verkan-karaktär (kausalt), snarare än bara ett slumpmässigt samband eller påverkat av andra faktorer. Med andra ord kan man säga: ”Om vi håller alla andra relevanta faktorer konstanta, vad är effekten av just denna variabel?”

Exempelruta: Effekten av ett stödprogram för vårdnadshavare på ungdomars skolnärvaro Om man bara tittar på vårdnadshavares deltagande i ett stödprogram och ungdomarnas skolnärvaro kan man se ett samband, men det kan påverkas av andra faktorer, som familjens socioekonomiska status, föräldrarnas utbildningsnivå, barnets tidigare skolresultat eller ålder. Genom att använda en statistisk modell kan forskaren därför kontrollera för dessa bakgrundsfaktorer. Då kan man undersöka om det verkligen är deltagandet i programmet för vårdnadshavare som påverkar skolnärvaron – alltså om det finns ett kausalt samband – och att skillnaderna inte beror på exempelvis familjens ekonomiska situation eller barnets ålder.

Samtidigt finns vissa begränsningar. Kvantitativa metoder ger sällan fördjupad förståelse för bakomliggande orsaker eller processer, och risken finns att viktiga nyanser går förlorade om frågorna är alltför generella eller snävt formulerade.

Därför kombineras kvantitativa metoder ofta med kvalitativa tillvägagångssätt för att ge en mer komplett bild av det studerade fenomenet.

I det följande beskrivs tre kvantitativa datainsamlingsmetoder: enkäter och frågeformulär, strukturerad observation samt bedömningsinstrument och standardiserade intervjuer.

Enkäter och frågeformulär Enkäter och frågeformulär är standardiserade instrument där samma frågor ställs till många personer, ofta i form av flervalsfrågor, skattningsskalor eller korta fritextsvar. De kan användas i ett personligt möte, skickas digitalt via e-post eller webbaserade verktyg, delas ut på papper eller genomföras per 205

Utvärdering för socionomer t­ elefon. Moderna digitala enkätverktyg möjliggör automatiserad datainsamling och analys.

Inom socialt arbete används kvantitativa metoder flitigt för att utvärdera insatser, tjänsters kvalitet och brukares tillfredsställelse. Exempelvis kan enkäter och frågeformulär användas för att undersöka hur väl stödinsatser möter brukarnas behov, hur nöjda de är med bemötandet och tillgängligheten eller vilka resultat som uppnåtts över tid. Vid större satsningar, som implementering av nya arbetssätt eller metoder, möjliggör kvantitativ datainsamling jämförelser mellan verksamheter och mellan tidsperioder. Sådana utvärderingar kan ligga till grund för verksamhetsutveckling, resursfördelning och politiska beslut, och bidrar därmed till att skapa evidensbaserad praktik i socialt arbete. Användning kan inte minst göras enligt strukturen i enskilt systemupplägg (se avsnittet ”Enskilt systemupplägg” i kapitel 11).

I inflätad utvärdering kan enkäter användas som återkommande och korta mätpunkter under insatsens gång genom enskilt systemupplägg, snarare än som ett separat moment vid projektets slut. De kan integreras i ordinarie möten eller digitala plattformar där brukare redan är aktiva. På så sätt kan förändringar och tendenser upptäckas tidigt och ligga till grund för justeringar av insatser i realtid. Frågorna kan anpassas pragmatiskt efter aktuella behov, men utformas så att de ändå möjliggör jämförelser över tid.

Enkäter och frågeformulär har flera fördelar inom datainsamling. De är ett effektivt sätt att samla in information från många personer samtidigt, vilket ger möjlighet till breda och statistiskt tillförlitliga analyser. Eftersom frågorna är standardiserade får alla svarande samma frågor, något som både ökar jämförbarheten mellan svaren och minskar risken att datainsamlingen påverkas av den som utför den. Metoden är dessutom flexibel och tillgänglig, eftersom enkäter kan distribueras digitalt, på papper eller via telefon. Den automatiserade datainsamlingen och analysen som moderna verktyg erbjuder förenklar bearbetningen och minskar behovet av manuellt arbete.

Trots sina många fördelar har enkäter och frågeformulär vissa nackdelar.

De insamlade svaren kan bli ytliga, särskilt när slutna frågor eller skattningsskalor används, vilket begränsar möjligheten till djupare förståelse. Det finns också en risk att svarsfrekvensen blir låg, vilket kan påverka tillförlitligheten och representativiteten i resultaten. Om någon missförstår en fråga saknas ofta möjligheten till förtydligande, vilket kan leda till felaktiga eller förenklade svar.

Eftersom metoden bygger på självrapportering kan dessutom svaren påverkas av social önskvärdhet eller minnesfel hos den som besvarar enkäten.

206

15. Datainsamlingsmetoder

Exempelruta: Delaktighet i socialpsykiatrisk verksamhet Att utvärdera delaktighet i en socialpsykiatrisk verksamhet är avgörande för att förstå brukarnas upplevelser, behov och möjligheter att påverka sin egen vardag och stödinsats. Ett vanligt sätt att mäta delaktighet är att använda strukturerade enkäter eller frågeformulär. Dessa kan innefatta skattningsskalor där brukare får uppskatta i vilken utsträckning de känner sig delaktiga i verksamhetens beslut, planering och genomförande. I figur 15.1 ges exempel på enkätfrågor för att mäta brukarnas delaktighet i en socialpsykiatrisk verksamhet. Skattningsskalan går från 1 (Instämmer inte alls) till 5 (Instämmer helt).

Fråga

Skattningsskala 1–5

Jag känner mig informerad om de beslut som tas i verksamheten.

1 2 3 4 5

Kommentar (frivillig)

Jag har möjlighet att 1 2 3 4 5 påverka planeringen av mitt stöd.

Personal lyssnar på mina synpunkter och önskemål.

1 2 3 4 5

Jag är nöjd med mitt inflytande över insatserna.

1 2 3 4 5

Jag upplever att min delaktighet har ökat under den senaste tiden.

1 2 3 4 5

Figur 15.1 Exempel på enkätfrågor.

Enkäten kan kompletteras med öppna fritextfrågor, till exempel: • Vad tycker du fungerar bra när det gäller din möjlighet att vara delaktig?

• Finns det något du önskar förbättra för att känna ökad delaktighet?

Strukturerad observation Strukturerad observation innebär att utvärderaren systematiskt observerar och registrerar fördefinierade beteenden, processer eller händelser i enlighet med ett observationsschema eller checklista (vilket också låter sig göras genom enskilt systemupplägg, se avsnittet ”Enskilt systemupplägg” i kapitel 11). Ofta används särskilda kodningssystem för att säkerställa enhetlighet och minska subjektivitet. Strukturerad observation används till exempel för att dokumen207

Utvärdering för socionomer Teori, praktik och värdeburen verksamhet Kajsa Svanevie Hur vet vi egentligen att socialt arbete gör skillnad? Och varför fungerar en insats för en person – men inte för en annan? I den här boken möter berättelser från det sociala arbetets praktik teorier och metoder för uppföljning och utvärdering.

Läsaren får bekanta sig med olika utvärderingsmodeller och datainsamlingsmeto­ der, och se hur de kan användas på ett sätt som både stärker det professionella omdömet och fördjupar den kunskapsbaserade praktiken.

Genom levande exempel blir det tydligt hur brukarens röst, professionellas erfaren­ heter, forskning och professionsetik kan vävas samman i en kunskapsbaserad prak­ tik. Med fokus på förändringsteori och inflätad utvärdering visar bokens innehåll hur utvärdering kan bidra till reflektion, lärande och utveckling – och samtidigt värna den etiska dimensionen i socialt arbete. Reflektionsfrågor och praktiska övningar gör innehållet direkt användbart i det professionella arbetet, och på Gleerups webbplats finns dessutom extramaterial i form av utvecklade exempel och verklighetsnära övningar som rör inflätad utvärdering. Läsaren bjuds genom texten in till en vidare reflektion: Hur kan mening och mätbarhet förenas i socialt arbete, på ett sätt som stärker både kvalitet och etik?

Boken ger inspiration och verktyg för studenter, yrkesverksamma, forskare och beslutsfattare. Den visar hur utvärdering kan bli en kraft för förändring som verk­ ligen räknas. Det är en bok för alla som vill förena mening och mätbarhet i ett socialt arbete med legitimitet och djup.

Kajsa Svanevie är socionom och fil.dr i socialt arbete.

Hon har tioårig erfarenhet som lektor vid Linnéuniversi­ tetet och har även arbetat som utvärderare vid Umeå utvecklings­ och fältforskningsenhet samt med praktiskt professionellt arbete vid socialtjänsten.

9 789151 121529