LokaalKabaal · 12 november 2026 · 1 min lezen

Een agent verandert voortdurend: nieuwe prompts, nieuwe modellen, nieuwe tools. Zonder vaste evaluatie weet u niet of een wijziging iets verbetert of juist stuk maakt.

Het probleem: kwaliteit op gevoel

Teams beoordelen een agent vaak op een handvol voorbeelden die toevallig goed of slecht gingen. Dat geeft een vertekend beeld en maakt elke wijziging een gok.

Het mechanisme: een vaste evaluatieset

Een evaluatieset is een verzameling representatieve gevallen met de gewenste uitkomst. Daar horen ook de lastige gevallen bij: onvolledige gegevens, uitzonderingen, en verzoeken die de agent moet weigeren of doorzetten.

Bij elke wijziging draait de agent de volledige set. Zo ziet u per categorie of de kwaliteit stijgt of daalt, voordat de wijziging live gaat.

Zo evalueren wij

We bouwen de evaluatieset in de verkenning op uit echte, geanonimiseerde of afgeschermde gevallen. Tijdens de pilot breiden we hem uit met elke correctie van een medewerker. In productie meten we daarnaast live: het aandeel goedgekeurde voorstellen, de overdrachten naar de mens en de kosten per taak.

Elke maand bespreken we de resultaten met de proceseigenaar, inclusief de gevallen die misgingen.

Evaluatie en compliance

Een vaste evaluatie is ook bewijs richting uw compliance-afdeling: u kunt aantonen hoe de agent zich gedraagt en dat wijzigingen gecontroleerd worden doorgevoerd.

Wat we in de pilot meten

Score op de evaluatieset per categorie bij elke release, plus het live aandeel voorstellen dat zonder correctie wordt goedgekeurd.

Veelgestelde vragen

Groot genoeg om alle belangrijke categorieën en uitzonderingen te dekken. Begin met wat representatief is en breid uit met elke fout uit de praktijk.

Volgende stap

Wilt u dit toepassen in uw organisatie? We beginnen met één proces en een meting.

Laat een evaluatieset voor uw agent opzetten Lees hoe wij een agent-pilot aanpakken →

Lees ook