Gjennomføring av evalueringer

Formål med Norads evalueringer er å:

  • systematisere kunnskap om resultater og prestasjoner som kan bidra til å forbedre tilsvarende tiltak i tiden framover (læringsfunksjonen)
  • vurdere om et tiltak er gjennomført som avtalt og/eller om forventet resultat er oppnådd (kontrollfunksjonen/ dokumentasjon)

Vektleggingen mellom lærings- og kontroll/dokumenteringsfunksjonen varierer mellom ulike evalueringer. Formidling av kunnskapene til relevante beslutningstakere er viktig virkemiddel for å påvirke utformingen av kommende tiltak.

Det er evalueringsavdelingen sin målsetning at evalueringsprosesser skal være deltakende og inklusive og fremme størst mulig læring. Det etableres derfor ofte en referansegruppe bestående av interessenter, berørte parter, ev. faglige ressurspersoner, fagavdeling og evalueringsavdelingen. Disse kommenterer arbeidet underveis. I den grad det er hensiktsmessig ønsker også evalueringsavdelingen å arrangere seminarer underveis og i etterkant.

Evalueringsprogram

Evalueringsavdelingen fremlegger flerårige planer for evaluering. Disse er utarbeidet i samråd med berørte avdelinger i departementet, ambassader og Norad. Evalueringsprogrammet skal inneholde en kort begrunnelse for evaluering: formål, målgruppe, samt hvilke aspekter evalueringen især skal omfatte.

Evalueringsvirksomhetens oppgaver

  • Vurdere måloppnåelse og resultater i forhold til vedtatte planer.
  • Vurdere om ressursbruken står i rimelig forhold til oppnådde resultater.
  • Systematisere erfaringer for å kvalitetssikre og forbedre fremtidig virksomhet gjennom gode læringsprosesser.
  • Gi informasjon til bevilgende myndighet og allmennheten.

Evalueringsvirksomheten skal bidra dels til å lære og samle erfaringer fra norsk deltakelse i internasjonalt utviklingssamarbeid, dels til å holde aktørene i norsk utviklingspolitikk forvatningsmessig ansvarlig. Den enkelte evaluering kan vektlegge disse to formål forskjellig.

Valg av evalueringsobjekt

Valg av evalueringsobjekt må sees i lys av de tre kriteriene risiko, egenart og vesentlighet, fastsatt av Finansdepartementet.  Dette har  referanse til hvor omfattende og viktig tilskuddsordningen er, kvalitet og omfang, rapportering og i hvilken grad det er mulig å beskrive de årlige resultatene.

Den enkelte evaluering bør normalt belyse følgende:

  • Relevans: Er aktiviteten relevant i forhold til norsk bistandspolitikks målsetninger og strategier? Er aktiviteten relevant i forhold til mottagerlandets behov og prioriteringer? Er den relevant i forhold til det utviklingsproblem den skal se på?
  • Måloppnåelse (effectiveness): Er de primære målsetninger for aktiviteten nådd? Er de planlagte resultater nådd?
  • Bærekraft (sustainability): Hva er langtidsvirkningen av aktiviteten? Vil aktiviteten kunne videreføres også etter at bistandsfinansieringen er avsluttet? Er det lokalt eierskap?
  • Produktivitet (efficiency): Er investeringene og driftsomkostningene berettighet? Kunne de samme resultater ha blitt oppnådd med færre midler?
  • Virkning (impact): Positive og negative primære og sekundære langtidseffekter produsert av aktivitetene, direkte eller indirekte, tilsiktede eller utilsiktede.

Evalueringsprinsipper

  • Objektive, etterprøvbare og gjennomsiktige: Vurderinger skal være basert på faktiske utsagn; utsagn skal være basert på troverdige (reliable) data eller observasjoner. Relevante interessenter i Norge eller mottakerlandet skal konsulteres i forbindelse med evalueringers tilrettelegging og gjennomføring, inklusive i utarbeiding av oppgavebeskrivelse og diskusjon av rapportutkast.
  • Upartiske: Evalueringer skal gi en avbalansert fremstilling av styrker og svakheter. I den grad interessenter har forskjellige synspunkter skal disse tas med i evalueringen.
  • Uavhengige:  Medlemmer av evalueringsteamet må ikke ha vært personlig engasjert i de aktiviteter som skal evalueres. Virksomheter som gjennomfører evalueringer må ikke ha vært involvert i forberedelse eller gjennomføring av aktivitetene.

Evalueringsprosessen

En evalueringsprosess består ofte av følgende elementer: Beskrive oppdrag, valg av konsulent, foreløpig rapport, rapportskriving og sluttrapport. Les mer under menypunktet Evalueringsprosessen.