definitiekaart evidence based beleid

DEFINITIEKAART EVIDENCE BASED BELEID
1
Beleidsmedewerkers kunnen EBB in twaalf stappen ontwikkelen
Toon zo wetenschappelijk mogelijk aan wat de aard en omvang van het probleem is.
Stel een helder, operationeel beleidsdoel (SMART).
Kies zo mogelijk maatregelen waarvan eerdere (buitenlandse) evaluaties aantonen dat ze werken.
Maak een heldere beschrijving van de maatregelen.
Bepaal de methode waarmee de maatregelen worden geëvalueerd.
Bepaal wat er met de uitkomsten van de evaluatie wordt gedaan.
Bepaal welke data nodig zijn voor en passen bij de gekozen evaluatiemethode.
Organiseer altijd ten minste een voor- en nameting.
Zorg dat de data worden verzameld volgens de vereiste specificaties en kwaliteitsnormen.
Analyseer de data en trek conclusies over de effectiviteit van de maatregelen.
Herzie de maatregelen zo nodig.
Houd contact met de wetenschap en de praktijk over (wetenschappelijke onderbouwing van) beleid.
Beleidsmedewerkers kunnen effecten aantonen op basis van kwantitatief en kwalitatief onderzoek
Kwantitatief onderzoek richt zich op kwantitatieve uitkomsten van beleid (zoals aantal schoolverlaters).
Kwantitatief onderzoek levert, afhankelijk van de gekozen methode, ‘harde’ conclusies op.
Kwalitatief onderzoek richt zich doorgaans op het verklaren van de gevonden uitkomsten.
Een combinatie van kwantitatief en kwalitatief onderzoek verdient daarom de voorkeur.
6
EEN
DEFINITIE
Beleidsmedewerkers hanteren een tweeledige definitie van Evidence Based Beleid (EBB)
EBB is beleid dat zich bij de beschrijving van het beleidsprobleem en de oplossing zoveel mogelijk baseert
op wetenschappelijke kennis; én
EBB is beleid waarvan de (verwachte) effecten zo wetenschappelijk mogelijk kunnen worden aangetoond.
EEN MANIER VAN
BELEID MAKEN EN
EVALUEREN
2
EEN AANTAL
UITGANGSPUNTEN
Wat is
Evidence Based
Beleid (EBB) volgens
het ministerie
van OCW?
3
In volgorde waarin de methode ‘hard’ bewijs oplevert, zijn er de volgende methoden
EEN AANTAL
DOELEN
Via kwantitatief evaluatieonderzoek
De gouden standaard:
Een gecontroleerd experiment met een interventiegroep en een controlegroep die op basis van loting zijn vastgesteld.
Een quasi-experiment (of natuurlijk experiment):
Een methode die een toevallig tot stand gekomen interventie- en controlegroep (bijvoorbeeld bij geleidelijke
invoering van beleid) benut.
Instrumentele variabelen:
De interventiegroep en controlegroep worden gevormd door individuele eigenschappen die de kans om deel te
nemen aan het beleid beïnvloeden maar geen invloed hebben op de effecten van dat beleid.
Matching methode:
Tussen de interventiegroep en de controlegroep wordt gecorrigeerd voor achtergrondkenmerken.
Via kwalitatief evaluatieonderzoek
Een casestudie:
Het intensief bestuderen van één of enkele cases gedurende een bepaalde periode.
Benchmarkstudie:
Onderzoek waarin gelijkende actoren met elkaar worden vergeleken.
Tevredenheidsonderzoek:
Onderzoek dat de tevredenheid vastlegt van een bepaalde doelgroep over een beleidsmaatregel.
Opiniepeiling:
Een meting van de opinie van belanghebbenden over het gevoerde beleid.
Observatie-onderzoek:
Waarnemingsmethode waarbij de onderzoekers door kijken en luisteren vaststellen wat er gebeurt.
Beschrijvend onderzoek:
Onderzoek waarbij de onderzoeker op vooraf afgesproken aspecten let en die beschrijft.
in opdracht van:
5
EBB is voor professionele beleidsmedewerkers een natuurlijk onderdeel van hun werk
Beleidsmedewerkers zijn verplicht de effectiviteit van hun beleid te toetsen.
Beleidsmedewerkers moeten publiek geld zo effectief en efficiënt mogelijk besteden.
Beleidsmedewerkers moeten bewindspersonen zo goed en onderbouwd mogelijk informeren.
Beleidsmedewerkers moeten oog hebben voor de lange termijn.
Beleidsmedewerkers worden beoordeeld en beloond op basis van hun EBB.
Beleidsmedewerkers willen met EBB zes doelen bereiken
EBB heeft als doel beoogd beleid zo effectief mogelijk uit te voeren.
EBB heeft als doel de uitrol van ineffectieve maatregelen te voorkomen.
EBB heeft als doel vooraf de gekozen beleidsrichting te kunnen onderbouwen.
EBB heeft als doel achteraf verantwoording af te kunnen leggen over het gekozen beleid.
EBB heeft als doel de kwaliteit van het beleidsproces te verhogen.
EEN AANTAL
VORMEN VAN
BEWIJS
VERGAREN
4
EEN AANTAL RANDVOORWAARDEN
Beleidsmedewerkers zijn praktisch in staat EBB te voeren
Beleidsmedewerkers hebben genoeg tijd voor EBB.
Beleidsmedewerkers hebben voldoende budget voor EBB.
Beleidsmedewerkers hebben (toegang tot) kennis van onderwijs en wetenschap.
Beleidsmedewerkers hebben kennis over evaluatiemethodieken.
Beleidsmedewerkers kunnen rekenen op steun van hun leidinggevenden en vanuit de politiek.
Deze Informatiekaart geeft een overzicht van wat het ministerie
van OCW bedoelt met Evidence Based (onderwijs)Beleid (EBB).
Deze kaart is tot stand gekomen op basis van literatuuronderzoek en
denksessies met beleidsmedewerkers van het ministerie van OCW.
Met dank aan allen voor hun denkwerk.
gemaakt door:
© 2010