Planuojant AoP programą ir ją vertinant, naudinga suprasti skirtumus tarp vertinimo, grįžtamojo ryšio ir tyrimų, nes kiekvienas iš jų atlieka skirtingus tikslus vertinant ir tobulinant programas.
Vertinimas yra sistemingas procesas, kuriuo siekiama sužinoti apie praktinį programos įgyvendinimą, vertę ar veiksmingumą pagal iš anksto nustatytus kriterijus, dažnai apimantis tiek formuojamąjį (nuolatinį), tiek apibendrinamąjį (galutinį) vertinimą. Vertinimas turi keletą sutapimų su grįžtamuoju ryšiu ir tyrimais, tačiau šie trys terminai skiriasi daugeliu aspektų.

Šie skirtumai padeda išsiaiškinti skirtingų metodų vaidmenis, o tai bus naudinga kuriant vertinimą.
Nustatykite vietos poreikius ir išteklius
Pradėkite paaiškindami savo AoP programos vertinimo priežastis. Tai gali būti dalyvių rezultatų vertinimas, vertės demonstravimas sprendimus priimantiems asmenims, nuolatinių įgyvendinimo pastangų tobulinimas, AoP veiklos koregavimas, derinimas su vietos politikos strategijomis arba būsimo AoP programos finansavimo paieška.
Apsvarstykite:
- **Esamas žinias:** peržiūrėkite paskelbtus AoP programų tyrimus ar vertinimus, kad nustatytumėte galimą poveikį ir savo tikslus. Tikslinė grupė: apibrėžkite, kas naudosis vertinimo išvadomis – politikai, valdymo grupės ar įgyvendinimo komandos. Vietinė patirtis: ištirkite, ar jūsų ar kitos vietos organizacijos, pvz., savivaldybės ar regionai, atliko panašius vertinimus ir ar jų metodai bei patirtis gali būti įkvėpimo šaltinis ir informuoti apie jūsų vertinimo dizainą. Ekspertizė ir ištekliai: įvertinkite, ar jūsų vietos komanda turi reikiamų vertinimo kompetencijų, ar reikalinga išorės ekspertizė, pvz., vertinimo specialistai, tyrėjai ar finansų analitikai. Biudžetas: skirkite bent 10 % programos biudžeto vertinimui, kad užtikrintumėte pakankamus išteklius.
Vertinimo komandos sudarymas
Suburkite komandą su reikiama patirtimi. Priklausomai nuo jūsų vertinimo poreikių, tai gali būti:
Duomenų rinkimo specialistai: tai komandos nariai, kurie gali padėti kurti ir platinti apklausas arba atlikti interviu. Jie užtikrina, kad duomenų rinkimas būtų sistemingas ir atitiktų jūsų vertinimo tikslus.
Analitikai: analitikai interpretuoja surinktus duomenis, nustato modelius ir išskiria prasmingas įžvalgas. Pavyzdžiui, jie gali apskaičiuoti vidutinius balus iš apklausų arba grupinių interviu atsakymų pagal bendras temas.
Konsultantai: konsultantai teikia specializuotas žinias tokioms užduotims kaip sąnaudų ir naudos analizės atlikimas, apimantis programos sąnaudų palyginimą su jos rezultatų verte, pvz., pagerėjusia psichine gerove ar sumažėjusiu sveikatos priežiūros paslaugų naudojimu.
Jei ištekliai riboti, sutelkite dėmesį į svarbiausius vertinimo įgūdžius, tokius kaip duomenų rinkimas ar analizė, ir išnagrinėkite partnerystės galimybes su vietos universitetais, mokslinių tyrimų organizacijomis ar ne pelno siekiančiomis agentūromis, kurios gali pasiūlyti patirties ar išteklių jūsų vertinimo pastangoms paremti.
Pasirinkite metodus ir klausimus
Rinkdamiesi metodus, atsižvelkite į savo vertinimo tikslus ir informacijos, kurią norite surinkti, tipą. Pavyzdžiui, jei norite suprasti, kaip dalyviai vertina programą, galite atlikti interviu, kad išgirstumėte jų nuomonę. Jei jūsų tikslas yra įvertinti bendrą programos poveikį, apklausos gali padėti greitai surinkti duomenis iš daugelio žmonių.
Kūrybiški metodai, tokie kaip menais grįsti metodai, taip pat naudingi norint įtraukti dalyvius ir surinkti daug unikalių įžvalgų neformalioje aplinkoje. Toliau pateikiami keli rekomenduojami duomenų rinkimo metodai, kuriuos galima naudoti atskirai arba kartu:

Rekomenduojami pagrindiniai rezultato matavimai
- Gyvenimo pasitenkinimas (pavyzdžiui, matuojamas vieno elemento gyvenimo pasitenkinimo matavimu)
- Psichinė gerovė (pavyzdžiui, matuojama trumpąja Warwick-Edinburgh psichikos gerovės skale (SWEMWBS))
- Vienišumas (pavyzdžiui, matuojamas T-ILS (UCLA 3 elementų)).
Papildomi rezultato matavimai, kuriuos taip pat galima įtraukti nerimo / depresijos simptomai (pavyzdžiui, matuojami 4 elementų paciento sveikatos klausimyno skale (PHQ-4))
- Miego problemos (pavyzdžiui, matuojamos 3 elementu iš PHQ-9 depresijos skalės)
- Stresas (pavyzdžiui, matuojamas vieno elemento suvokiamo streso skale)

Atvirų klausimų pavyzdžiai – „Prašome pasidalyti viena ar keliomis konkrečiomis veiklomis ar akimirkomis, kurios jums įsiminė dalyvaujant AoP programoje“.
Struktūrizuotų interviu pavyzdžiai „Kaip vertinate skalėje nuo 1 iki 10...“
Interviu klausimų dalyviams pavyzdžiai.
Šie klausimai gali būti naudojami vertinant Dalyvių suvokimas apie AoP programą:
- Kaip sužinojote apie AoP programą?
- Kokia buvo jūsų pirmoji reakcija, kai apie ją sužinojote?
- Kas jums patiko / nepatiko AoP programoje?
- Kiek esate patenkintas paslauga / programa?
- Kokios naudos patyrėte iš AoP programos?
- Ar patyrėte kokių nors pokyčių savo gyvenime?
- Ar patyrėte sunkumų susitikdami su ryšių palaikymo darbuotoju?
- Ar ryšių palaikymo darbuotojas buvo paslaugus? Kodėl / kodėl ne?
- Kiek jums buvo patogu dalyvauti nustatytoje meno ir kultūros veikloje?
- Kaip būtų galima pagerinti jūsų patirtį su AoP?
(adaptuota iš PSO priemonių rinkinio „Kaip įgyvendinti socialinį skyrimą“).
Interviu klausimų, skirtų suinteresuotosioms šalims, įgyvendinančioms AoP programą, pavyzdžiai
Šie klausimai gali būti naudojami AoP programai įvertinti sveikatos priežiūros paslaugų teikėjų ir ryšių palaikymo darbuotojų požiūriu:
- Kiek dalyvių nukreipėte į AoP programą praėjusią savaitę / mėnesį / metus?
- Kiek iš šių dalyvių buvo patenkinti programa?
- Ar manote, kad jūsų nukreipti dalyviai gavo naudos? iš AoP programos?
- Su kokiais pagrindiniais iššūkiais susidūrėte nukreipdami žmones į jungiamojo darbuotojo / AoP programą?
**Menu pagrįsti / kūrybiniai metodai:** Menu pagrįsti ir kūrybiniai metodai gali būti taikomi ypač vertinimo ciklo duomenų rinkimo ir sklaidos etapuose. Jie apima įvairius metodus, įskaitant, pvz., fotografiją, vaizduojamąjį meną ir kūrybinį rašymą. Menu pagrįsti ir kūrybiniai metodai dažnai yra gerai priimami dalyvių ir gali būti laikomi mažiau įkyriais nei, pvz., labiau kliniškai pagrįsti vertinimo įrankiai.
Jūsų vertinimo klausimai turėtų apimti pagrindinius programos veiksmingumo ir rezultatų aspektus. Pavyzdžiui, dalyvių psichinės gerovės pokyčių, programos prieinamumo patogumo ir bendro pasitenkinimo vertinimas.