Nettverk for tilskudd og EVA-forum 29. oktober 2014

Transkript

1 Nettverk for tilskudd og EVA-forum 29. oktober 2014 Systematisk bruk av evalueringer i oppfølgingen av tilskuddsordninger Direktoratet for økonomistyring Side 1

2 Tilskudd og Evaluering er to fagområder i DFØ Det er tilbud på begge områder gjennom: Nettverk Kurs Veiledningsmateriell Rådgivning Side 2

3 Programpunkter Tema: Systematisk bruk av evalueringer i oppfølgingen av tilskuddsordninger Frokost Hva sier regelverket om evaluering i tilskuddssammenheng? v/dfø Pause Systematisering av evalueringsarbeidet i Kunnskapsdepartementet v/ Sveinung Helgheim KD Pause Tilskuddsforvaltning og evalueringer: Bruk av indikatorer som metode v/ Bjørn Erik Rasmussen, Utdanningsdirektoratet Avslutning Side 3

4 Mål for nettverksmøtet; Økt forståelse og kunnskap om bruk av evalueringer i en systematisk oppfølging av tilskuddsordninger Side 4

5 Evalueringer i staten * balnt 10 største tilskuddsforvaltene av øvrige mottakere Direktoratet for økonomistyring Side 5

6 Direktoratet for økonomistyring Side 6

7 Økonomiregelverkets krav til evaluering av tilskuddsordninger Direktoratet for økonomistyring Side 7

8 Forvaltning Evaluering Etablering Aktører og faser i tilskuddsarbeidet Felles regelverk Behandling i Stortinget Behandling i Stortinget Utforming av tilskuddsordning Fastsetting av regelverk Etablering av forvaltningsorganisasjon Bevilgningsforslag Rapportering Tildelings-/oppdragsbrev Kunngjøring og søknadsbehandling Tilskuddsbrev Oppfølging og kontroll Registrering og utbetaling Oppfølging og kontroll Rapport om måloppnåelse Mottaker

9 Krav til evaluering er nedfelt i økonomiregelverket DFØ forvalter økonomiregelverket Hvorfor Hva 4 Grunnleggende styringsprinsipper Alle virksomheter skal: c) sikre tilstrekkelig styringsinformasjon og forsvarlig beslutningsgrunnlag 6.5 Evaluering av tilskuddsordninger Departement og tilskuddsforvalter skal sørge for at det gjennomføres evalueringer for å få informasjon om tilskuddsordninger er effektive i forhold til ressursbruk, organisering og fastsatte mål. Når Hvor ofte Hvor mye Frekvens og omfang av evalueringene skal ta utgangspunkt i en vurdering av risiko og vesentlighet for den enkelte tilskuddsordning, herunder hvor omfattende og viktig tilskuddsordningen er, kvalitet og omfang av øvrig rapportering og i hvilken grad det er mulig å beskrive de årlige resultatene. Evalueringer må vurderes i sammenheng med kravene som stilles til rapportering, jf. Pkt Side 9

10 Hva er en evaluering? Direktoratet for økonomistyring Side 10

11 Hva er en evaluering? «En systematisk datainnsamling, analyse og vurdering av en planlagt, pågående eller avsluttet aktivitet, en virksomhet, et virkemiddel eller en sektor - Vurderer verdien av noe, i tillegg til å beskrive - Stiller krav om systematikk og metode som det må redegjøres for. - Forutsetter at det finnes konkret informasjon som definerer hva som skal måles og hva som er godt og dårligt.» (Finansdepartementet 2005) Side 11

12 Alt er ikke evaluering: Evaluering Kvalitetsmåling Monitorering Intern kontroll Brukerundersøkelse Side 12

13 Intern og ekstern-evaluering Intern evaluator Fordeler: God sakkunnskap Lett tilgang til data Kort vei fra evaluering til bruk Ekstern evaluator Fordeler: Tilstrekkelig distanse Større faglig kompetanse Gjennomføringskapasitet Nye perspektiver Ulemper: Ekstra tidspress Forutsetter evalueringsfaglig kompetanse Ikke alltid tilstrekkelig distanse Ulemper: Mindre sakkunnskap Lengre vei fra evaluering til bruk Vurder evaluators legitimitet og gjennomslagskraft Side 13

14 Hvordan finansiere evalueringer Side 14

15 Finansiering av tilskuddsforvaltningen statsbudsjettets inndeling og fullmakter Stortingets bevilgningsreglement: Budsjettet skal inndeles i kapitler og poster ( 4) Utgiftspostene skal inndeles etter art (på avdeling for ) ( 4) Bevilgningsvedtakene skal knyttes til hver enkelt utgifts- og inntektspost ( 5) Utgiftsbevilgninger kan ikke brukes til andre formål enn forutsatt av Stortinget ( 5) Rundskriv R-101 Statens kontoplan: Bruttobudsjetterte virksomheter: Skiller mellom statens egne driftsutgifter (postene 01-29) og tilskudd (postene 60-85) Nettobudsjetterte virksomheter: Får bevilgninger over en 50-post, kan inneholde både drifts- og tilskuddsmidler Forvaltere utenfor offentlig forvaltning: Forvaltningsoppgaven er kjøp av tjeneste (driftspost), tilskuddsmidler over postene

16 Hvilke aspekter kan inngå i en evaluering av tilskuddsordninger? Direktoratet for økonomistyring Side 16

17 Tre sentrale aspekter ved en evaluering av tilskuddsordninger Krav i Økonomiregelverket «..at det gjennomføres evalueringer for å få informasjon om tilskuddsordninger er effektive i forhold til ressursbruk, organisering og fastsatte mål.» Innebærer at det er tre sentrale aspekter ved en evaluering av tilskuddsordninger 1. Utforming av tilskuddsordningen det man vil om ordningen er tilstrekkelig godt utformet for at prioriterte mål skal kunne nås 2. Tilskuddsforvaltningen det man gjør. om forvaltningen skjer på en forsvarlig og effektiv måte, iht. mål og regelverk for ordningen 3. Effekter av tilskuddsordningen det man oppnår om man oppfyller målene for ordningen 17

18 Gir tilskuddsordningen forventede effekter? Effekter en endret tilstand hos brukerne eller samfunnet som kan tilskrives tilskuddsordningen. Hvilke effekter kan tilskrives aktiviteter tilskuddet har støttet? Oppfyller disse effektene målene for tilskuddsordningen? Side 18

19 Er tilskuddsforvaltningen god nok? Forvaltningen av en tilskuddsordning skal oppfylle tre sentrale delmål 1. Korrekt målgruppe at tilskuddet når frem til de riktige brukerne/tilskuddsmottakerne 2. Korrekt tildelingsbeløp at tilskuddsmottakerne tildeles og mottar tilskuddsbeløp i samsvar med intensjoner og tildelingskriterier 3. Korrekt ressursanvendelse at tilskuddsmottaker anvender midlene slik de er ment og i samsvar med formålet Side 19

20 Er tilskuddsordningen tilstrekkelig godt utformet? Utformingen av en tilskuddsordning legger premisser som både påvirker forvaltningen og muligheten for måloppnåelse Identifisere elementer som har forbedringspotensiale Vurdere ordningen som en helhet: Henger elementene godt sammen? Gir totaliteten gode nok resultater? Side 20

21 Hva er riktig frekvens og omfang av en evaluering? Direktoratet for økonomistyring Side 21

22 For å gi verdi, må evalueringsresultater settes inn i en sammenheng og følges opp Resultatene fra evalueringen må brukes og inngå som grunnlag i styringsprosesser Rapportering om oppnådde resultater Vurder å endre tilskuddsordningen hvis det kan gi gevinster for samfunnet eller virksomheten Vurder å bruke andre virkemidler hvis disse fremstår som mer effektive eller rettferdige enn tilskudd Anvend evalueringen til læring Styrke oppbyggingen av kompetanse på saksfeltet Styrke kompetansen innen evalueringsmetodikk Direktoratet for økonomistyring Side 22

23 Hva er riktig frekvens og omfang? Frekvens og omfang skal ta utgangspunkt i en vurdering av risiko og vesentlighet for den enkelte tilskuddsordning Eksempelvis: Hvor omfattende og viktig er tilskuddsordningen Hvordan vurderes kvalitet og omfang på øvrig rapportering I hvilken grad er det mulig å beskrive de årlige resultatene Vurdere omfang i forhold til kost-/nytte Må vurderes i sammenheng med kravene som stilles til rapportering Ressurser som benyttes til evalueringer skal ha et rimelig omfang i forhold til nytte Direktoratet for økonomistyring Side 23

24 Oppmerksomhet og konsekvenser ved feil Tilskuddsrammens størrelse Detaljeringsgrad, grad av uklarhet i regelverk Risiko/insentiver til feil og misbruk Oppgavenes kompleksitet Ordningens vesentlighet Prosesser i tilskuddsforvaltningen Brukerkontroll Eksterne kontrollører: Ansatte, Riksrevisjonen, kommunerevisjonen Statens kontroll- og oppfølgingsbehov Organisering Ordningens transparens Ordningens utforming Aktører og interessenter Aktørenes profesjonalitet (personalets kompetanse, ledelse, internkontroll) Antall ledd i forvaltningen Generell driftsstøtte, tjenesteproduksjon, prosjektstøtte? Type tilskuddsmottakere Type tilskudd, tildelingskriterier Målet med ordningen Statlig ansvarsområde? Private, kommunale, frivillige,små/store 24

25 Risiko og vesentlighet når flere ordninger ses i sammenheng Når flere ordninger rettet mot samme mål og målgruppe Understøtter ordningene hverandre ifht mulighet for å oppnå målet for ordningen /ønskede effekter på et politikkområde? Er nødvendige avgrensninger gjort? Er det muligheter for forenkling? Når flere ordninger har ulike forvaltningsopplegg Mulighet for standardisering? Læring på tvers av ordninger? Forenkling (for brukerne, men kanskje også for forvaltningen?) Når flere ordninger samlet innebærer vesentlighet Hvis man forvalter flere ordninger Flere ordninger kan samlet ha stor vesentlighet/risiko, selv om dette ikke gjelder for den enkelte tilskuddsordning Se ordninger i sammenheng med andre virkemidler Ordningen er ofte en av flere virkemidler som retter seg mot et mål eller en ønsket effekt Direktoratet for økonomistyring Side 25

26 Bedre stat-prisen DFØ kårer hvert år det tiltaket som best har bidratt til effektiv ressursbruk i staten. Har dere iverksatt vellykkede tiltak som andre kan lære av? Nominer din virksomhet! Eller tips oss om et tiltak og bli med i trekningen av en Ipad mini Send til: bedre-stat@dfo.no

27 Eksterne innlegg Direktoratet for økonomistyring Side 27

28 Ulike veiledere belyser de ulike aspektene i evalueringsprosessen Evaluering av tilskudd Evaluering i styringen Direktoratet for økonomistyring Side 28

29 Avslutning Direktoratet for økonomistyring Side 29

30

31 DFØ minner om Innføringskurs tilskudd 13. november 2014 Direktoratet for økonomistyring Side 31

32 Forslag til temaer for de kommende nettverksmøtene? Direktoratet for økonomistyring Side 32