Van verantwoording naar vooruitgang: de kracht van lerend monitoren en evalueren in de publieke sector

Stelt u zich voor: u bent projectleider van een regionaal project bemoeizorg dat gaat over het bieden van (vaak ongevraagde) hulp aan mensen met complexe problemen die zelf geen hulp zoeken of deze actief vermijden. U heeft samen met een team van maatschappelijk betrokken partners maanden gewerkt aan een geavanceerd digitaal platform voor de aanmelding van cliënten. Er is al veel budget geïnvesteerd, u volgt het leidende projectplan nauwgezet en u legt elk kwartaal verantwoording af.

Maar na de eerste monitoringsronde blijkt de harde realiteit: wijkagenten gebruiken de tool nauwelijks. Zij hebben geen behoefte aan een digitaal formulier, maar aan direct, persoonlijk contact voor snelle afstemming.

In veel publieke projecten is dit het moment waarop de angst toeslaat: wat nu? We zijn gewend om plannen tot het einde uit te voeren en pas achteraf, bij de eindevaluatie, te constateren dat de plank is misgeslagen. Het loslaten van een gekozen koers voelt vaak als falen, terwijl het in feite een vorm van professionaliteit is.

In het bovenstaande voorbeeld zou op advies van BMC de ineffectieve IT-investering direct worden stopgezet en het projectplan aangepast. Door de focus te verleggen naar wekelijkse fysieke afstemmingsmomenten verbeterde de samenwerking in de wijk, nog vóór de officiële projectdeadline. Dit is de essentie van lerend monitoren en evalueren: niet achteraf verantwoorden wat er misging, maar tijdens de rit de 'waarom-vraag' stellen om de maatschappelijke impact te maximaliseren.

De huidige praktijk: verantwoording als eindpunt

In de publieke sector zijn we vaak meesters in plannen schrijven en projecten starten. Echter, de praktijk leert dat het monitoren van voortgang veelal te laat of te oppervlakkig gebeurt. Vaak beperkt het zich tot het afvinken van kpi’s, zonder diepgaand inzicht in de daadwerkelijke impact of in de onderliggende oorzaken van vertragingen of knelpunten. Tegen de tijd dat we écht willen weten hoe een project loopt, zijn we al zo ver gevorderd dat bijsturen of stoppen lastig en kostbaar is.

Daarnaast wordt evalueren te vaak gezien als een verplicht nummer aan het einde van een project, primair gericht op verantwoording afleggen. Het gaat dan om de vraag of de projectdoelen zijn behaald en of het budget correct is besteed. Hoewel verantwoording essentieel is, missen we hierdoor een kans: de kans om te leren en gaandeweg te verbeteren. De inzichten die een evaluatie opleveren, komen vaak te laat om het huidige project te beïnvloeden en worden niet altijd systematisch gebruikt voor toekomstige initiatieven. Dit resulteert in een cyclus waarin waardevolle lessen verloren gaan en we het wiel telkens opnieuw uitvinden.

Van controle naar continue verbetering: wat is lerend monitoren en evalueren?

De benadering van lerend monitoren en lerend evalueren verschuift de focus van louter controle en verantwoording naar continue reflectie en verbetering.

Lerend monitoren is het doorlopend verzamelen en interpreteren van informatie over de voortgang en de eerste resultaten van een project of programma. Het doel is om snel inzicht te krijgen in wat werkt en wat bijsturing behoeft, zodat je tijdig kunt ingrijpen en aanpassingen kunt doen terwijl het project nog loopt. Ook de monitor zelf kan aangepast worden: als gaandeweg blijkt dat andere variabelen van belang zijn, worden deze opgenomen in de monitor. Tot slot kunnen ook leerprocessen worden gemonitord met behulp van kwalitatieve data, bijvoorbeeld in de vorm van inzichten, dagboekfragmenten, foto’s of video’s.

Lerend evalueren is een diepgaande en vaak participatieve vorm van evaluatie die parallel loopt aan de uitvoering. Het richt zich op het begrijpen van de 'waarom' en 'hoe' van de resultaten. Waar monitoren de thermometer is, is evalueren de diagnose. Het zoekt naar antwoorden op vragen als: Waarom leiden bepaalde acties tot specifieke resultaten? Welke werkingsmechanismen liggen hieraan ten grondslag? Welke lessen kunnen we trekken om de aanpak te optimaliseren? Het is een dynamisch proces waarbij reflectie, discussie en kennisdeling centraal staan, vaak met actieve betrokkenheid van alle lagen van de organisatie en zelfs externe stakeholders.

Leren in actie: wat levert het op?

De toepassing van lerend monitoren en evalueren draagt in belangrijke mate bij aan het succes van projecten in de publieke sector.

• Verhoogde impact: door tijdig bij te sturen, verhoog je de kans dat projecten hun doelen bereiken en de gewenste maatschappelijke impact hebben. Je voorkomt dat middelen worden verspild aan ineffectieve benaderingen.

• Wendbaarheid: de organisatie wordt flexibeler en kan sneller inspelen op veranderende omstandigheden, nieuwe inzichten of onverwachte uitdagingen. Dit is cruciaal in een complexe en dynamische omgeving.

• Hogere ROI: door te leren wat werkt en wat niet, kun je budgetten en capaciteit gerichter inzetten. Dit leidt tot een hogere Return on Investment (ROI) van publieke gelden.

• Betere verantwoording: continue monitoring en evaluatie leveren waardevolle data en inzichten op die de basis vormen voor weloverwogen beslissingen en effectieve communicatie naar politiek, stakeholders en burgers. Je kunt beter verantwoording afleggen over de geleerde lessen en de aanpassingen die zijn gedaan.

• Gedeeld begrip: ten slotte stimuleert het gezamenlijke leerproces dialoog, creëert gedeeld begrip en bouwt bruggen tussen verschillende afdelingen en lagen van de organisatie.

In het voorbeeld van het project rondom bemoeizorg past BMC lerend monitoren en evalueren toe om het gezamenlijk leren en de resultaten van het project direct te verbeteren. Door middel van een 'effectenarena' kunnen projectleiders en direct betrokkenen de beoogde impact vertalen naar een (beperkt) aantal passende indicatoren. Als blijkt dat de beoogde impact verschilt van het projectplan, kan deze direct worden aangepast; ook dat is lerend evalueren in actie.

Essentiële randvoorwaarden voor succes

Om lerend monitoren en evalueren succesvol te implementeren, zijn een aantal essentiële randvoorwaarden cruciaal:

• Leiderschap en commitment: de top van de organisatie moet het belang van leren erkennen en dit actief uitdragen. Dit betekent niet alleen budget en middelen vrijmaken, maar ook het goede voorbeeld geven en een veilige omgeving creëren waarin experimenteren en leren van fouten is toegestaan. Leiderschap moet de moed hebben om ineffectieve interventies stop te zetten, zoals in het bemoeizorgvoorbeeld, en dit als een succesvol leermoment te presenteren.

• Duidelijke doelen en relevante indicatoren: Voordat je start, moeten de lange termijn maatschappelijke doelen helder zijn. De monitoringsindicatoren moeten hierop aansluiten en niet alleen gericht zijn op output ('aantal formulieren ingevuld'), maar op de beoogde effecten ('verbeterde samenwerking', 'snellere hulp').

• Veilige leercultuur: De 'waarom-vraag' stellen lukt alleen als medewerkers zich veilig voelen. Een cultuur waarin reflectie en de dialoog over 'wat beter kan' centraal staan, is de zuurstof voor LME. Fouten moeten gezien worden als waardevolle data om van te leren, niet als reden voor sancties.

• Capaciteit en digitale ondersteuning: LME vereist tijd en expertise. Er moet geïnvesteerd worden in professionals die weten hoe ze kwalitatieve data moeten verzamelen, zoals dagboekfragmenten, en dit kunnen koppelen aan kwantitatieve voortgangsdata. Digitale expertise is noodzakelijk om datagedreven werken te faciliteren.

De Quick Win

U hoeft niet te wachten op de implementatie van een gloednieuwe IT-structuur om te starten met lerend monitoren en evalueren. De quick win ligt in de mentaliteitsverandering en het stellen van de juiste 'leervragen'.

1. Stel de Wéérkelykse leervraag: vervang tijdens het eerstvolgende projectoverleg de vraag "Wat is er afgevinkt?" door "Wat hebben we afgelopen week geleerd dat onze aanpak beïnvloedt?" Vraag actief naar knelpunten en de oorzaak van successen of vertragingen.

2. Organiseer een mini-effectenarena: neem een recent resultaat (een KPI die achterblijft, een onverwacht succes, zoals de lage adoptie van het digitale platform) en bespreek dit multidisciplinair. Vertaal het resultaat naar de beoogde impact en identificeer de gap. Dit is de kern van de snelle bijsturing.

3. Monitor de Input, Niet Alleen de Output: Begin met het bijhouden van kwalitatieve data in de vorm van 'dagboekfragmenten' of 'lessons learned logs' van projectmedewerkers. Dit zijn snelle, rijke databronnen die inzicht geven in de werkingsmechanismen, nog voordat harde kwantitatieve resultaten beschikbaar zijn.

Door klein te beginnen en de focus te verleggen van 'projectvolgend' naar 'resultaatverbeterend' monitoren en evalueren, creëert u al op korte termijn lerend vermogen en betere prestaties.

Afsluiting: de circulaire winst

De publieke sector opereert in een complexe, dynamische omgeving, waarin lineaire projectplanningen niet langer volstaan. Lerend monitoren en evalueren is geen modegril, maar een noodzakelijke evolutionaire stap die naadloos aansluit bij een opgave gerichte werkwijze, zoals de door BMC ontwikkelde Aanpakken met Impact (AMI).

Het vermogen om continu te leren, bij te sturen en lessen te kapitaliseren, is de ware motor achter maatschappelijke impact. Door de focus te verplaatsen van angst voor falen naar het omarmen van leren als noodzakelijke stap, transformeren organisaties van afvinkmachines naar wendbare, datagedreven entiteiten die effectief en efficiënt publieke waarde creëren.

Wilt u weten waar uw organisatie staat op het gebied van datavolwassenheid om LME mogelijk te maken? Bepaal snel uw positie met onze scan.