Levende dokumentation og pædagogisk statistik
Fra mavefornemmelse til fakta: Derfor fortjener pædagogisk arbejde sine egne tal
Klokken er 15.02, og vagtskiftet er i gang. "Hvordan har ugen været?" spørger aftenvagten. Dagvagten tænker sig om: "Jo… meget godt, tror jeg."
Bag det svar gemmer der sig en hel uge. En tirsdag med to konflikter. En onsdag, hvor gåturen lykkedes for tredje gang i træk. En torsdag, hvor morgenmedicinen blev kvitteret for sent. Og en fredag, der var så rolig, at ingen lagde mærke til den. Men det er fredagens ro eller tirsdagens konflikt, der bliver til ugens fortælling. Ikke fordi nogen lyver. Fordi hukommelsen vægter det seneste og det dramatiske højere end alt det midt imellem.
Jeg har stået i det vagtskifte i ti år. Og jeg vil påstå, at noget af det vigtigste i pædagogisk arbejde samtidig er noget af det, vi måler dårligst: om et menneske langsomt trives bedre eller langsomt mistrives. Denne artikel handler om hvorfor, om hvad forskningen faktisk siger, og om hvordan tal kan styrke fagligheden i stedet for at true den.
Vi måler alt undtagen det vigtigste
Tænk over, hvad der allerede bliver målt og skrevet ned omkring en borger på et botilbud. Medicin kvitteres. Søvn noteres mange steder. Indkøb bogføres. Vagtplaner går op på minuttet.
Men selve kerneopgaven vurderes de fleste steder på hukommelse og mavefornemmelse: udvikling, trivsel, mestring. Ugens fortælling bliver til ved et vagtskifte som det ovenfor. Månedens fortælling bliver til, når der skal skrives statusnotat, ofte flere uger efter at tingene skete.
Det er der tre ærlige grunde til:
- Værktøjerne har aldrig passet til hverdagen. Dokumentationssystemer er bygget til kontorer og bagefter-arbejde, ikke til situationen ude ved sofaen, i badeværelset eller på gåturen. Når registrering kræver, at man forlader det pædagogiske arbejde, taber registreringen. Det skal den også.
- Kulturen har gjort tal til kontrol. Mange fagfolk har mødt dokumentation som noget, der laves til andre: til systemet og til forvaltningen. Noget, der tager tid fra borgeren. Den erfaring sidder dybt, og den er forståelig.
- Frygten for at reducere mennesker til tal. Den bekymring er sund, og den skal tages alvorligt i stedet for at blive fejet væk. Et menneske er ikke en kurve.
Men frygten har en pris, som sjældent bliver sagt højt: Når vi ikke måler, forsvinder den langsomme forandring. Fremskridt, der tager tre måneder, kan ikke huskes ved et vagtskifte. Og beslutninger bliver truffet på den historie, der huskes bedst. Ikke nødvendigvis på den, der er mest sand.
Hvad forskningen faktisk viser
Idéen om at måle den enkeltes fremskridt systematisk er ikke ny, og den kommer ikke fra regneark-afdelingen. Den kommer fra fagfolk, der ville deres borgere det godt.
Mål, der sættes på forhånd. Allerede i 1968 udviklede Kiresuk og Sherman metoden Goal Attainment Scaling. I stedet for at vurdere bagefter, om "det gik godt", beskriver man på forhånd, hvad fremskridt konkret vil se ud for netop dette menneske. Og man beskriver det på en skala, så både "lidt bedre end håbet" og "lidt under det forventede" har et sprog. Metoden bruges i dag bredt i rehabilitering. Pointen er værd at tage med hjem: Når succes først defineres bagefter, vinder bagklogskaben. Når den defineres på forhånd, kan alle se, om man er på vej.
Måling opdager det, øjet misser. Psykoterapiforskningen har lavet det måske vigtigste eksperiment på området. Lambert og Shimokawa samlede i 2011 forskningen om systematisk feedback. I behandlingsforløb får mellem 5 og 14 procent af klienterne det værre undervejs, og behandlerne opdager det sjældent selv i tide. Men når udviklingen blev målt løbende med enkle redskaber, og behandleren fik tallene at se, kunne antallet af forløb med forværring omtrent halveres. Ikke fordi tallene behandlede nogen. Fordi de fik fagfolkene til at reagere, mens problemet stadig var lille.
Personen som sin egen målestok. "Jamen vores borgere kan ikke sammenlignes med nogen." Nej, netop. Derfor bruger forskningen på specialområdet single-case-tilgangen: Man sammenligner ikke med et gennemsnit, men med personens eget udgangspunkt. Hvordan var niveauet før? Hvad skete der, da vi ændrede indsatsen? Det er en anerkendt metode, skabt til præcis den virkelighed, hvor ingen to mennesker er ens.
Og Danmark er allerede i gang. Feedback Informed Treatment, hvor borgerens egen vurdering indgår systematisk fra gang til gang, gik ifølge Social- og Boligstyrelsen fra 12 danske kommuner i 2014 til 29 i 2016. Metoden er sidenhen udbredt på bosteder, i bostøtte og i familieindsatser. Kommunerne indfører Fælles Faglige Begreber, hvor mål og funktionsevne beskrives i et fælles sprog med faste niveauer. Og socialtilsynets kvalitetsmodel forventer, at tilbud kan dokumentere positive resultater for borgerne. Det her er ikke en fremtidstrend. Det er den retning, det danske socialområde allerede bevæger sig i.
Min vurdering efter ti år i praksis: Forskningen siger ikke, at tal skaber udvikling. Det gør relationer og fagligt arbejde. Den siger noget mere præcist: at systematisk måling opdager forandring tidligere end hukommelsen, og at fagfolk træffer bedre beslutninger, når de kan se udviklingen i stedet for at skulle huske den. Tallene er ikke fagligheden. De er faglighedens briller.
Tre stole ved samme bord
Lad mig gøre det konkret. Personerne her er sammensatte eksempler fra ti års praksis, så ingen kan genkendes. Men situationerne kender enhver, der har siddet med til et statusmøde.
Pædagogen og tirsdagene
Et team oplever en periode med flere konflikter omkring en borger. Stemningen er, at "det er blevet værre på det seneste". Men humørregistreringerne, der er lavet i situationerne gennem seks uger, viser noget mere præcist: Det er ikke blevet værre. Det er tirsdage. Samme ugedag, samme mønster. Tirsdag er dagen, hvor den faste kontaktperson har fri, og hvor dagens plan altid har set anderledes ud.
Teamet ændrer én ting: Tirsdagens plan bygges op om det mest genkendelige, borgeren har. Konflikterne falder. Mønstret lå i tallene, længe før det lå i maven. For maven mærker, at noget er galt. Den fortæller bare sjældent hvornår.
Lederen og tilsynsbesøget
Tilsynet spørger, hvordan tilbuddet arbejder systematisk med resultater. Det spørgsmål har to slags svar. Det ene er en mappe med statusnotater, skrevet i bakspejlet, og en leder, der må sige "det kan jeg finde til jer". Det andet er en rapport, der allerede findes: mål for den enkelte borger, daglige registreringer bag hvert tal og kurver, der viser udviklingen. Også dér, hvor den var svær.
Forskellen er ikke kosmetik. Med det første svar handler mødet om at lede efter dokumentation. Med det andet handler det om det, mødet burde handle om: om indsatsen virker, og hvad der skal justeres.
Sagsbehandleren og opfølgningen
Handleplansmøde. Målet var, at borgeren skulle blive mere selvhjulpen i hverdagen. Konkret: selv at tage bussen til det beskyttede værksted. Uden data bliver mødet til "det går faktisk meget godt med bussen", og så er det den sætning, der skal bære en beslutning om næste års indsats.
Med registreringer ser bordet noget andet: en kurve over tre måneder. Fra støtte hver gang, over støtte de svære dage, til selv at tage afsted de fleste dage. Sagsbehandleren kan se det samme som personalet. Beslutningen om næste skridt bliver truffet på fælles fakta. Og borgeren får et bevis på noget, der er værd at være stolt af.
Hvad kræver det i praksis?
Tre ting skal være på plads, før tal i pædagogisk arbejde bliver til andet end endnu et skema, der sander til:
- Registreringen skal ske i situationen. Hukommelsen vægter det dramatiske og det seneste. Det er ikke en holdning. Det er sådan, hukommelse virker. Registreringer, der laves efter vagten, arver den skævhed. Registreringer i øjeblikket gør ikke.
- Det skal være let. To tryk. Mere kan en presset hverdag ikke bære, og mere er der heller ikke brug for: gennemført eller ej, hvordan var humøret, skete der noget særligt.
- Tallene skal samle sig selv. Hvis nogen skal bruge en aften i et regneark for at se mønstret, bliver mønstret aldrig set. Registreringerne skal automatisk blive til kurver, mønstre pr. ugedag og rapporter. Ellers dør systematikken af sin egen vægt.
Læg mærke til, hvad der ikke står på listen: flere skemaer, mere skrivetid, et kursus i statistik. Systematik handler ikke om at skrive mere. Det handler om at skrive i tide og lade tallene gøre resten af arbejdet selv.
Derfor byggede jeg levende dokumentation ind i Kalendo
Da jeg byggede Kalendo, var den visuelle struktur fundamentet. Det kan du læse om i guiden om visuel struktur til voksne med autisme. Men den anden halvdel af værktøjet er svaret på alt det, denne artikel handler om. Jeg kalder det levende dokumentation:
- Registrering i situationen: gennemført, humør og hændelser. To tryk, mens det sker, ikke tyve minutter bagefter
- Statistik, der tegner sig selv: gennemførelse over tid med tydelige zoner, mønstre pr. ugedag og opsummeringer i almindeligt sprog
- Delmål med niveauer: så "mere selvhjulpen" bliver til en kurve, man faktisk kan følge og vise frem
- PDF-rapport til mødet: bygget på dagens egne registreringer, klar når tilsynet, sagsbehandleren eller de pårørende spørger
Filosofien er den samme hele vejen: Personalet skal bruge tiden på mennesker. Dokumentationen skal ske, mens man arbejder, ikke i stedet for arbejdet.
Pædagogik er og bliver et fag for mennesker. Men selv den bedste mavefornemmelse fortjener at vide, om den har ret.
Vil du se, hvad jeres registreringer kan blive til? Book en demo, eller læs videre i guiden om visuel struktur til voksne med autisme.
Ofte stillede spørgsmål
Reducerer tal ikke mennesker til statistik?
Nej. Brugt rigtigt handler tallene ikke om mennesket, men om indsatsen. En kurve afgør ikke, hvem et menneske er. Den viser, om det, I gør, ser ud til at hjælpe. Beslutningerne er stadig faglige og bliver truffet af mennesker. Tal uden faglighed er blinde. Faglighed uden tal kan ikke se langsom forandring.
Tager det ikke ekstra tid i en presset hverdag?
Det afgørende er, hvornår der registreres. To tryk i situationen er hurtigere end tyve minutters rekonstruktion efter vagten. Og det er rekonstruktionen, der er dobbeltarbejde: Først oplever man dagen, bagefter skal man huske den. Registrering i øjeblikket erstatter en del af det skriftlige arbejde i stedet for at lægge oveni.
Hvad hvis tallene viser, at det går tilbage?
Så er det den vigtigste kurve, I har. Tilbagegang, man kan se, kan man handle på. Måske skal indsatsen justeres, måske skal noget helbredsmæssigt undersøges, måske er kravene sat for højt. Uden tal opdages det ofte først, når det er blevet til mistrivsel. Tallene fjerner ikke tilbagegangen, men de flytter opdagelsen frem.
Er så få datapunkter overhovedet seriøs statistik?
Ja, når man bruger dem rigtigt. På specialområdet sammenligner man ikke borgeren med et landsgennemsnit. Man sammenligner personen med sig selv over tid. Det kaldes single-case-logik og er en anerkendt tilgang, netop fordi ingen to mennesker i målgruppen er ens. Tredive dages registreringer om det samme menneske siger mere om dét menneske end en stikprøve på tusind fremmede.
Hvad siger kommunen og tilsynet til den slags dokumentation?
De efterspørger den. Socialtilsynets kvalitetsmodel lægger vægt på, at tilbud kan dokumentere resultater for borgerne, og kommunerne indfører fælles faglige begreber med mål og funktionsevneniveauer. Ved en handleplansopfølgning er en kurve bygget på dagligdags registreringer et stærkere grundlag end "vi synes, det går bedre".
Om forfatteren
Niklas Boye Rasmussen er uddannet specialpædagog og har arbejdet med voksne med autisme i ti år, primært på botilbud. Han er stifter af Kalendo, et digitalt struktur- og dokumentationsværktøj udviklet ud fra hverdagen på botilbud og ikke fra et skrivebord.
Kilder og videre læsning
- Kiresuk, T. J. & Sherman, R. E. (1968): Goal attainment scaling: A general method for evaluating comprehensive community mental health programs. Community Mental Health Journal, 4(6), 443–453.
- Turner-Stokes, L. (2009): Goal attainment scaling (GAS) in rehabilitation: a practical guide. Clinical Rehabilitation, 23(4), 362–370.
- Lambert, M. J. & Shimokawa, K. (2011): Collecting client feedback. Psychotherapy, 48(1), 72–79.
- Social- og Boligstyrelsen / Vidensportalen på det sociale område: Feedback Informed Treatment. vidensportal.dk
- KL: Fælles Faglige Begreber. Fælles begreber for mål, indsatser og funktionsevne på voksensocialområdet. kl.dk/ffb
- Social- og Boligstyrelsen: Kvalitetsmodel for socialtilsyn. sbst.dk