De preoccupatie met evidence based beleid miskent de exploratieve waarde van wetenschap voor beleid. In veel en de meest uitdagende beleidsprocessen, zoals de grote transities aangaande energie, zorg, landbouw en circulaire economie, moet de overheid beslissingen in onzekerheid nemen. Het beleidsonderzoek zou zich minder moeten bezighouden met wat zeker is en meer met wijs handelen in onzekerheid. Wetenschappers kunnen de besluitruimte voor politici duiden, en kunnen aangeven wat mogelijk effectieve maatregelen zijn. Dit bescheiden, voorzichtig aftasten van de werkelijkheid vereist arena’s waar wetenschap, bestuurders en volksvertegenwoordigers in gesprek zijn over de toepassing van wetenschappelijke inzichten in de praktijk van het hier en nu. Op diverse plekken in Nederland wordt geëxperimenteerd met dergelijke arena’s.

In deze column reageert de auteur op de WODC-affaire: de conclusies van een onderzoek van het Wetenschappelijk Onderzoek- en Documentatiecentrum (WODC) van het ministerie van (toen nog) Veiligheid en Justitie naar de overlast van coffeeshops zouden op verzoek van beleidsambtenaren in de politiek gewenste richting zijn omgebogen. Dekker gaat na wat de aandacht voor dit voorval kan betekenen voor de relatie tussen opdrachtgever en opdrachtnemer.

Er is de laatste tijd veel aandacht voor het omgaan met onzekerheid en dynamiek in beleid. Zo is er recent de roep om leren door doen, door een overheid die samen met de samenleving het experiment aan durft te gaan. Zo’n benadering van beleid als gezamenlijk experiment is veelbelovend, maar vergt ook passende methoden voor beleidsevaluaties. Adaptief beleid speelt hierop in. De laatste jaren is een belangrijke stap gezet in de ontwikkeling van methoden waarmee adaptief beleid ontwikkeld kan worden. Voor de evaluatie en de rol van evaluaties heeft dit belangrijke implicaties. In dit artikel wordt hierop verder ingegaan, op basis van ervaringen met adaptief beleid en beleidsevaluatie binnen het Nederlandse Deltaprogramma.

Dit essay is een reactie vanuit het ministerie van Sociale Zaken en Werkgelegenheid op de column ‘Beleidsevaluatie als ritueel’ van Peter van Hoesel (BO januari 2017).

In dit essay biedt de auteur een handreiking voor creatieve samenwerking, niet als oplossing of regel, maar als creatief proces dat steeds per geval en situatie in elke fase van beleidsonderzoek kan worden ingericht. De auteur doet dit aan de hand van een aantal door de auteurs van Kennis voor beleid (2015) geformuleerde criteria.

In deze bijdrage reageert de auteur op het essay van Frans de Haan en Jan-Maarten van Sonsbeek: Beleidsevaluaties: meer dan een ritueel! (BO september 2017).

Over eenzelfde beleid circuleren meerdere waarheden. Hoe valt dit te begrijpen? We gaan op verkenning rond ‘frame’ en ‘framing’ als veelgebruikte concepten in beleidsonderzoek. Na scherpstelling leert ons literatuuroverzicht dat een beleidskader idealiter gemarkeerd wordt als stabiel (naar basiselementen van structuur) maar in de praktijk geldt als inherent volatiel (naar voorkomen en effect). Iteratieve en vaak interactieve processen van framing kunnen dit verklaren zoals we aantonen met een case rond de Lokale Integrale VeiligheidsCellen (LIVC’s) in Brussel. Die case illustreert ook dat overheidsactoren zelf framen én met wisselend succes. Dat succes is te wijten aan factoren op individueel en institutioneel niveau en is cruciaal om vandaag te doorgronden. Want weten hoe een (on)waarheid over beleid te maken, is een eerste stap om framing (mogelijk) te kraken of meer te hanteren als tool om diverse frames, en dus finaal ook burgers, beter aan elkaar te haken. De voorbeelden van beleid en onderzoek in deze bijdrage zijn gekozen rond ‘wicked issues’ op diverse niveaus en terreinen van overheidsoptreden in België en elders.

Een gedegen beleidsvoorbereiding kan beleidsfalen voorkomen. Hoewel deze thematiek al jaren aandacht krijgt in de politiek, lukt het de rijksoverheid nog niet hieraan structureel succesvol invulling te geven. In het licht van de recente Tweede Kamer verkiezingen is er hernieuwde aandacht voor samenspraak bij beleid en beleidsexperimenten om te komen tot beter beleid. Het rendement daarvan is naar verwachting beperkt. Ten eerste omdat samenspraak vaak zodanig ingeperkt is, dat de invloed van kennis voor beleid beperkt blijft. Ten tweede omdat wetenschappelijke kennis prevaleert boven de voor beleidseffectiviteit noodzakelijke tacit knowledge. De rijksoverheid kan meer rendement halen uit investeringen in een betere beleidsvoorbereiding, door de structurele afweging tot de inzet van samenspraak en beleidsexperimenten bij nieuw of gewijzigd beleid; verantwoording van deze afweging, alsmede onafhankelijke toetsing van de te verwachten beleidseffectiviteit. Investeringen in handreikingen zijn weinig zinvol. De gemeente Rotterdam geeft een goed voorbeeld.

De bundel Kennis voor beleid (2015), onder redactie van Peter van Hoesel, Jos Mevissen en Bart Dekker, is een boek voor iedereen die werkzaam is op het snijvlak van onderzoek en beleid. De uitgave is vooral opgezet als leerboek of overzichtswerk voor studenten, beleidsonderzoekers en beleidsmedewerkers die in hun dagelijkse praktijk te maken hebben met beleidsonderzoek.

De positieve benadering van evaluatie in relatie tot het bereiken van succes is een frisse wind. Het wordt inderdaad tijd dat evaluatoren gebruikers meer helpen en stimuleren om van (beleids)ervaringen te leren. En: dat geëvalueerden zich daarvoor vanaf het begin openstellen. Aandachtspunt is wel dat de evaluator daarbij zijn of haar waardevolle kritische (kennis)blik niet verliest.

Nationaal en internationaal staat onderzoek dat maatschappelijk relevant is, wetenschappelijk gezien hoge kwaliteit heeft, en zowel integer als efficiënt wordt uitgevoerd in de schijnwerpers. Het achterliggende idee is dat alleen zo de gewenste maatschappelijke impact kan worden bereikt. Door het bevorderen van verantwoorde onderzoekspraktijken, waarbij er onder andere expliciet aandacht is voor aspecten als stakeholderparticipatie, interdisciplinaire samenwerking, replicatie en systematische reviews, kunnen financiers of programmeurs van onderzoek hieraan bijdragen. In dit artikel wordt een overzicht gegeven van de wijze waarop ZonMw dat doet als kennisprogrammeur op het gebied van het gezondheidsonderzoek. Hiertoe is een toetsingskader ontwikkeld en toegepast op zestien lopende onderzoeksprogramma’s, dat ook voor andere domeinen en actoren betekenis heeft. Een belangrijke aanbeveling is dat ‘verantwoord programmeren’ een eigen kennisbasis behoeft om de toegevoegde waarde ervan te kunnen bepalen. Naast investeringen in metaonderzoek vraagt dat om een goede monitoring en informatievoorziening bij de kennisprogrammeur.

Aan het eind van zijn column ‘Inkopen doen’ vraagt Jos Mevissen de lezer om te reageren (zie Beleidsonderzoek Online januari 2016). Zijn column gaat over negatieve ontwikkelingen op het gebied van inkoop voor beleidsonderzoek. Bevordering van een goede marktwerking in de markt voor beleidsonderzoek is een van de speerpunten van de Vereniging voor Beleidsonderzoek (VBO). In deze bijdrage reageert de vereniging op de column van Jos Mevissen.

Burgers willen meer en nadrukkelijker zelf invloed hebben op hun eigen en de collectieve leefomgeving. Overheden worstelen met dit, an sich legitieme, vraagstuk, met name hoe dit vorm en inhoud gegeven moet worden binnen de vastgelegde kaders. De huidige procesgang in de relatie tussen burgers en overheden bij leefomgevingsingrijpen is gebaseerd op het aloude vierluik (spoor 1): de overheid informeert de belanghebbende burgers over haar voornemens, burgers kunnen zienswijzen indienen, die al dan niet meegenomen worden, daarna bestaat de mogelijkheid van bezwaar aantekenen (niet bindend), en tot slot kan een beroepsprocedure bij de Raad van State worden doorlopen (wel bindend maar steeds minder effectief). Kortom, een erg defensieve en steeds minder resultaatgerichte benadering. De auteurs van deze bijdrage pleiten nu voor de ontwikkeling van een tweede spoor waarbij constructieve burgerparticipatie via samenspraak en samenwerking optrekt met het bevoegd gezag om vaak sneller en goedkoper tot projectresultaten met draagvlak te komen. Helaas zijn zowel aan de zijde van de burgers als bij veel overheden de noodzakelijke randvoorwaarden nog niet ingevuld om deze coproductie op voorhand succesvol te laten verlopen. De auteurs doen een oproep aan bestuurders en politici om hier invulling aan te geven. Praktijkervaringen wijzen uit dat constructieve burgerparticipatie veel meerwaarde heeft, met name ook voor overheden.

Bedrijven en andere organisaties ontvangen vaak veel enquêtes en klagen over de lastendruk hiervan. Tevens dalen responsaantallen en zijn er zorgen over de kwaliteit van de respons. In dit artikel wordt beschreven wat er gedaan kan worden om de motivatie van bedrijven en organisaties, en hun respondenten, te verhogen om daarmee bij organisatie- en bedrijfsenquêtes de responsaantallen en de responskwaliteit te verbeteren.

Het Rijk evalueert in principe elk beleidsterrein eens in de zeven jaar door middel van een beleidsdoorlichting. Dit is niet eenvoudig. De Handreiking beleidsdoorlichtingen biedt hierbij in de vorm van vele praktische tips de helpende hand.

Bij bijvoorbeeld de bouw van een gemeentelijk multifunctioneel centrum of de aanschaf van een nieuw computersysteem wordt bijna standaard om een business case gevraagd, om daarmee een zakelijke rechtvaardiging van de te nemen beslissing te verschaffen: nut en noodzaak moeten goed uit de doeken worden gedaan. Dit artikel presenteert de eerste resultaten van een zoektocht naar de (vermeende) kwaliteiten van dit besluitvormingsinstrument. Als ijkpunt voor het praktische gebruik van de business case wordt een nieuw ideaaltype van de business case geconstrueerd. De bestaande definities bieden daarvoor afzonderlijk onvoldoende houvast. Aan de hand van het ideaalmodel wordt vervolgens onderzocht hoe de business case in het publieke debat wordt gebruikt. Het datamateriaal bestaat uit 244 nieuwsberichten uit binnen- en buitenland over uiteenlopende business cases. Het artikel laat zien dat de business case sterk in opkomst is en zijn weg vindt in een divers palet van maatschappelijke thema’s en sectoren. Kwalitatieve argumenten voeren sterk de boventoon ten opzichte van cijfermatige inzichten. De belangrijkste kracht van de business case in het publieke domein ligt in het gegeven dat zowel de belangen van initiatiefnemers en bestuurders als van andere stakeholders worden benoemd.

Een lerende overheid heeft behoefte aan beleidsevaluaties die niet alleen van betekenis zijn voor het onderwerp waarop deze primair gericht zijn, maar ook bijdragen aan bredere, systematische opbouw van kennis en ervaring. Het interdepartementaal verbinden van expertise verruimt daarbij het zicht op factoren die het leren bevorderen of belemmeren.
Een centrale vraag is of de door het beleid beoogde publieke belangen inderdaad bevorderd worden. Beleidsevaluatie moet dan niet alleen gericht zijn op effectiviteit en doelmatigheid ten aanzien van relatief gemakkelijk meetbare indicatoren, maar ook op lastig te kwantificeren essentiële waarden zoals subjectief welzijn, rechtvaardigheid en maatschappelijke aanvaardbaarheid. Het verdient aanbeveling kostbare evaluatie-energie te concentreren op belangrijke kwesties waarover vooraf discussie of onzekerheid bestaat.
Uit een oogpunt van doelmatige beleidsvoorbereiding, en omdat de uitwerking van wetgeving en beleid ex post niet altijd eenvoudig is vast te stellen, is veel aandacht nodig voor ex ante evaluatie. Van onderzoek naar werkingsmechanismen van beleidsmaatregelen wordt in dit verband terecht veel verwacht.
Er is sprake van een paradoxaal spanningsveld tussen verwetenschappelijking en politisering van beleid. Daarom is stevig verankerde, onafhankelijke en onpartijdige beleidsevaluatie onmisbaar. Hoge methodologische kwaliteit biedt extra houvast om deze functie geloofwaardig te kunnen vervullen.
In het streven naar systematische opbouw van kennis en ervaring naast dossier-specifieke doelbereiking kan het helpen als evaluaties zowel een specifiek als een breder geldend algemeen deel bevatten. Belangrijk is ook te sturen op een evenwichtige evaluatieportfolio per beleidsterrein, met aandacht voor ex ante en ex post methoden, uiteenlopende waarden, en verschillende informatiebronnen. Naast best practices moet daarbij ook minder geslaagd beleid in beeld worden gebracht. Voor de bruikbaarheid van evaluaties voor de praktijk is goede vertegenwoordiging van het bottom-up perspectief noodzakelijk.
Evaluatie van beleid vereist gedegen inbedding binnen de nationale kennisinfrastructuur, effectieve samenwerking met kennisinstellingen en het up-to-date houden van het evalueren zelf. Dat is cruciaal voor het evaluatievermogen van de lerende overheid.

De meerwaarde van lokale rekenkamers is nog niet vanzelfsprekend. In dit artikel betogen de auteurs dat deze wordt beïnvloed door drie factoren: de relatie met de andere spelers in het lokale politiek-bestuurlijke krachtenveld, de kwaliteit van hun werk, en de processen waarmee dat werk een plaats krijgt in de gemeentelijke beleids- en besluitvorming. De ultieme meerwaarde van lokale rekenkamers zoeken zij niet in de onafhankelijkheid van de rekenkamer of in diens onderzoeken an sich, maar in de onzichtbare beïnvloeding van beleids- en besluitvorming door de robuuste positie van het instituut, in termen van onder meer waardering, gezag en vanzelfsprekendheid; een positie die wordt beïnvloed door bovengenoemde drie factoren. De toekomstige opgave voor gemeenteraden en rekenkamers ligt er dan ook in om verder te kijken dan de structuur, en met elkaar het gesprek over de rekenkamer te voeren op de punten relatie, kwaliteit en proces.

Nederlandse gemeenten baseren zich veelal op de uitkomsten van de Veiligheidsmonitor (VM) om te weten hoe inwoners de veiligheid in hun woonomgeving waarderen. Ze kijken hierbij onder andere naar het rapportcijfer voor de veiligheid in de eigen buurt. Maar is dit eigenlijk wel een bruikbaar cijfer? In dit artikel nemen we het conceptuele model van Oppelaar en Wittebrood (2006) als uitgangspunt voor het uitvoeren van een regressieanalyse om te achterhalen waardoor het rapportcijfer voor veiligheid in de eigen buurt wordt verklaard. Het rapportcijfer blijkt door vele zaken te worden beïnvloed, aangevoerd door de manier waarop bewoners aankijken tegen de omvang van de criminaliteit in de eigen omgeving, de ervaren overlast en het oordeel over de wijk. Vanwege de vele kenmerken die meespelen, zo beargumenteren we, doen gemeenten er verstandig aan om het rapportcijfer niet te gebruiken.