Onderzoeksmethoden en –technieken

Rekenkameronderzoek kan plaatsvinden met behulp van verschillende methoden en technieken.

Traditioneel rekenkameronderzoek

De belangrijkste elementen bij het ontwerpen van een traditioneel onderzoek zijn:

• het formuleren van een goede probleemstelling en normenkader;
• dossieronderzoek ter vaststelling van probleemstelling en normenkader;
• dossieronderzoek ter toetsing van de uitvoering;
• enquêteren  van verantwoordelijken en/of de doelgroep;
• gesprekken en/of interviews  met verantwoordelijken en/of de doelgroep;
• het formuleren van een sluitende keten van bevindingen, normen, conclusies, oordelen en aanbevelingen.

Lichtere vormen van onderzoek

Bij de beantwoording van de ‘wat gaan we doen’-vraag is het van belang om goed voor ogen te houden dat een lokale rekenkamer(commissie) ook andere instrumenten tot haar beschikking heeft dan alleen langlopend, grootschalig onderzoek.

Deze ‘lichtere’ onderzoeksvormen kunnen bepaalde onderwerpen op relatief snelle wijze onder de aandacht van de raad brengen, waardoor de rekenkamer waar nodig ook op actualiteiten kan inspelen of kan voorsorteren op eventueel diepergaand onderzoek.
Een rekenkamer zou vanuit kosten- en effectiviteitsoogpunt kunnen streven naar een mix van producten, bijvoorbeeld:

• op basis van een quick scan of vooronderzoek een specifiek probleem bij de raad agenderen;
• een (rekenkamer)brief aan de raad richten waarin de raad wordt geattendeerd op risico’s of een mogelijk probleem in de toekomst;
• een review uitvoeren van onderzoek dat al door anderen is verricht (bijv. een review van het onderzoek naar de jaarrekening door de accountant); of een review naar een onderzoek ex art 213a;
• jaarlijks de kwaliteit van de programmabegroting kritisch bekijken en de raad daar over informeren.

Bij een lichtere vorm van onderzoek liggen alternatieve presentatievormen voor de hand.

Pilot-onderzoek

Het kan zinvol zijn, alvorens het onderzoek wordt gestart één of meer pilotstudies uit te voeren om zo bepaalde onderdelen van een onderzoek (reikwijdte vraagstelling, vragenlijst, analysetechniek, normenkader, informatievoorziening, doelgroep e.d.) uit te testen en op basis daarvan zonodig bij te stellen alvorens over te gaan tot een bredere toepassing.
Vooral bij gemeentebrede onderzoeken verdient het aanbeveling eerst testonderzoeken (‘pilots’) uit te voeren bij een of enkele diensten.

Doelmatigheidsonderzoek

Op de website van de Algemene Rekenkamer is de Handreiking Meten van doelmatigheid opgenomen. De handreiking geeft goede handvatten voor het uitvoeren van doelmatigheidsonderzoek. Aan de orde komen:

• de begrippen prestaties, effecten en doelmatigheid;
• het afbakenen van het te onderzoeken onderwerp;
• het verzamelen van gegevens en het zoeken naar verklaringen;
• het berekenen van doelmatigheid en het omgaan met doelmatigheidskengetallen.

Noodzaak statisch onderzoek

In het algemeen zal het niet noodzakelijk zijn om voor rekenkameronderzoek gebruik te maken van heel ingewikkelde (statistische) onderzoeksmethoden.