Arvointiasetelman rakentaminen kannattaa aloittaa arvoinnin tarkoituksen ja taustalla vaikuttavan teorian pohdinnasta.

Kun tarkoitus ja teoria ovat selvillä nousevat arviointikysymykset ja käytettävät menetelmät luontevasti esiin. Kun tiedämme, mihin kysymyksiin olemme hakemassa vastausta, selviää myös se, millä menetelmillä vastaus voi löytyä.

Tässä kohdassa voi myös tehdä perustellun päätöksen siitä, tehdäänkö arviointi itse vai hankitaanko ulkopuolinen arviointi. Tätä asiaa ei pitäisi ratkaista vain sillä perusteella, onko ulkopuoliseen arviointiin rahaa vai ei.

Jäsennä oma hankkeesi tai arvioinnin kohteena oleva jatkuva toiminta seuraavan kolmen vaiheen
avulla.

1.vaihe: Arvioinnin tarkoitus

Mitä haluamme tietää? Mihin aioimme tietoa käyttää?
Ensimmäisessä vaiheessa pohditaan miksi tämä arviointi halutaan tehdä. Mihin aiomme tuloksia käyttää? Tässä kohdassa on tehtävä valintoja. Kaikkea ei voi arvioida. Järkeviä valintoja tehdään mm. pohtimalla omaa strategiaa. Mikä meille on tärkeää? Mitä olemme päättäneet priorisoida juuri nyt? Tässä kohdassa - viimeistään - rajataan myös arvioinnin kohde (esim. "projekti" ei yleensä ole riittävän rajattu kohde).

2. vaihe: Arviointikysymykset

Mihin etsimme vastausta?
Arviointikysymykset ovat kysymyksiä, joihin arvioinnilla pyritään vastaamaan. Arvioinnin tulos pitäisi aina pystyä palauttamaan sarjaksi arviointikysymyksiä ja niihin löytyneitä vastauksia. Kysymysten tulisi siis olla selkeässä ja yksiselitteisessä muodossa

3.vaihe: Menetelmät

Aineiston hankintastrategia
Menetelmillä tarkoitetaan niitä tapoja, joilla arviointikysymyksiin haetaan vastauksia. Menetelmä voi olla esimerkiksi kyselylomake, havainnointi, ryhmähaastattelu tms.

Aineiston hankintastrategialla viitataan siihen prosessiin, jolla arviointi tehdään. Se pitää sisällään myös ne valinnat, joita joudutaan tekemään esim. siksi, että kaikesta mahdollisesta kohteeseen liittyvästä ei ole mahdollista kerätä kaikkea aineistoa koko ajan. Menetelmään ja aineiston hankintastrategiaan liittyvät kysymykset menevät osin lomittain.

Teorialla tarkoitetaan toiminnan taustalla olevia ajatuksia ja oletuksia. Teoria voi olla kokemuksen kautta muotoutunutta käyttöteoriaa tai tutkittu tietoa. Yleensä se sisältää hypoteeseja ja oletuksia siitä, miten palvelun/intervention tms. odotetaan toimivan (= ohjelmateoria).

Ohjelmateorialla tarkoitetaan niitä tietoja, tapoja ja uskomuksia, joiden varassa toimimme. Emme ehkä ole tiedostaneet sitä, mutta se näkyy teoissamme, puheissamme, tekemissämme valinnoissa.