Een AI-pilot stoppen is een zakelijk besluit, geen oordeel over de mensen die hem hebben uitgevoerd. De proef moet laten zien of een afgebakende toepassing bruikbaar is. Als dat bewijs ontbreekt, is stoppen een geldige uitkomst. Met een besluitblad en een korte afbouw voorkom je dat medewerkers een afgewezen toepassing ongemerkt blijven gebruiken.
Deze gids gaat over het besluit aan het einde van een proef of bij een vooraf benoemd stopcriterium. Voor de start gebruik je Een AI-pilot opzetten. Een ernstig incident vraagt eerst de eigen incidentprocedure en verantwoordelijke specialist; wacht dan niet op een gewone evaluatie.
Stoppen, pauzeren of bijsturen?
Maak onderscheid tussen drie uitkomsten:
| Uitkomst | Wanneer past dit? | Wat leg je vast? |
|---|---|---|
| Stoppen | De taak levert onvoldoende waarde, controle is niet haalbaar of een fundamentele randvoorwaarde ontbreekt | Afbouw, handmatige terugval en reden |
| Pauzeren | Betrouwbare meetgegevens ontbreken of een noodzakelijke bron is tijdelijk niet beschikbaar | Wat ontbreekt, eigenaar en datum voor herbeoordeling |
| Beperkt bijsturen | Eén aantoonbare oorzaak is herstelbaar binnen een klein nieuw budget | Eén wijziging, hertest, einddatum en akkoord |
“Nog even doorgaan” is geen vierde categorie. Ook een pauze moet een eindpunt hebben. Spreek af dat er zonder nieuw akkoord geen nieuwe testgevallen of kosten bijkomen.
Verzamel bewijs vóór het besluitgesprek
De proefleider verzamelt de oorspronkelijke AI-proefkaart, de nulmeting en de volledige resultaten. Daarin horen:
- aantallen geteste, bruikbare en afgewezen gevallen per taaksoort;
- actieve tijd inclusief invoer, controle en herstel;
- kritieke fouten en hoe die zijn ontdekt;
- eenmalige uren, terugkerende kosten en resterende verplichtingen;
- verschillen tussen de afgesproken en werkelijk gebruikte scope;
- feedback van uitvoerders, ook van mensen die de toepassing niet gebruiken;
- de eigenaar van iedere open uitzondering.
Een ontbrekende meting is geen nul en geen bewijs van succes. Benoem die beperking. Laat de inhoudelijk beoordelaar een paar resultaten opnieuw tegen de bron controleren met AI-resultaten controleren.
Fictief voorbeeld: concepten voor orderregistratie
Een fictieve distributeur test het overnemen van artikelregels uit aanvraagformulieren naar een bestelconcept. De AI mag niets bestellen. De verkoopadministratie controleert elk concept.
Vooraf spreekt het team af: ten minste 27 van 30 concepten bruikbaar, geen gemist verkeerd artikelnummer en maximaal zeven actieve minuten per geval inclusief controle. De bestaande werkwijze vraagt in dit voorbeeld gemiddeld negen minuten.
Na de fictieve test zijn 24 van 30 concepten bruikbaar. De gemiddelde tijd is acht minuten en twee verkeerde artikelnummers zijn pas bij een extra controle ontdekt. Het team voldoet dus aan geen van de drie vooraf vastgelegde criteria. De mooie opmaak van de concepten verandert dat niet.
Bij een illustratief volume van 150 vergelijkbare gevallen per maand is één minuut tijdverschil 150 minuten, oftewel 2,5 uur capaciteit. Dat is geen gemeten besparing en ook geen lagere loonsom. Een extra reviewronde kan die beperkte capaciteitswinst bovendien opheffen. Gebruik voor die afweging Een AI-businesscase maken.
De proceseigenaar stelt hier stoppen voor. Alleen wanneer een gerichte broncorrectie het artikelnummerprobleem aantoonbaar kan oplossen, is een afzonderlijk goedgekeurde hertest te overwegen. De mislukte versie blijft ondertussen buiten het werkproces.
Besluitblad om te kopiëren
| Onderdeel | Jouw invulling |
|---|---|
| Proef en versie | Taak, tool/instructieversie en testset |
| Oorspronkelijke criteria | Letterlijke startafspraken, zonder achteraf aangepaste grens |
| Gemeten uitkomst | Aantallen, tijd, fouten en meetperiode |
| Afwijking | Welk criterium is niet gehaald en met welke omvang? |
| Oorzaak | Aangetoond probleem of nog onbekende oorzaak |
| Besluit | Stoppen, pauzeren of één beperkte hertest |
| Goedkeuring | Proceseigenaar, beoordelaar en budgetverantwoordelijke |
| Afbouw | Toegang, concepten, gegevens, kosten en handmatige terugval |
| Verantwoordelijke en datum | Wie voert iedere afbouwactie uit en wanneer? |
| Heropening | Welk nieuw bewijs is nodig voor een nieuwe proef? |
Zo neem je het besluit samen
- Laat de proefleider de gemeten uitkomst naast ieder oorspronkelijk criterium zetten. Houd kritieke fouten apart van gemiddelde scores.
- Laat de beoordelaar aangeven welke afwijkingen herstelbaar zijn en welke een fundamenteel probleem vormen.
- Laat medewerkers benoemen welk extra controle- of omwegwerk de meting nog mist.
- Vergelijk stoppen met maximaal één concrete hertest. Neem alleen toekomstige kosten en opbrengsten mee; reeds bestede uren komen niet terug door langer te testen.
- Laat de proceseigenaar het inhoudelijke voorstel en de budgetverantwoordelijke het budget- of afsluitbesluit goedkeuren.
- Communiceer het besluit, de einddatum en de terugvalwerkwijze aan alle testgebruikers.
- Controleer na de afbouw of de proef werkelijk buiten het dagelijkse proces is geraakt.
Bij een kleine onderneming kan dezelfde persoon proces- en budgetverantwoordelijke zijn. Laat dan minimaal een andere medewerker de feitelijke testresultaten controleren, zodat één enthousiaste initiatiefnemer niet alleen het eigen bewijs beoordeelt.
Bouw de proef gecontroleerd af
Stop nieuwe invoer en wijs een medewerker aan voor openstaande concepten. Een half gecontroleerd voorstel mag niet zonder eigenaar in een gedeelde map blijven liggen. Markeer het als concept of behandel het via het bestaande proces.
Inventariseer daarna proefaccounts, sleutels, koppelingen en gedeelde toegang. Laat de bevoegde beheerder de niet meer benodigde toegang intrekken. Controleer lopende kosten en opzegvoorwaarden in de eigen contracten; deze gids doet geen uitspraak over een leverancierscontract.
Bewaar alleen het noodzakelijke evaluatiebewijs volgens de interne afspraken. Laat gegevensbeheer bepalen wat met proefkopieën gebeurt. Maak geen ongecontroleerde extra archieven. Test tenslotte één normaal geval via de handmatige terugval en controleer of medewerkers die werkwijze kunnen vinden.
Uitzonderingen en meetfouten
Als de testset veel zwaarder was dan de nulmeting, mag je het tijdverschil niet als zuivere vergelijking gebruiken. Rapporteer per taaksoort of pauzeer totdat vergelijkbare gevallen beschikbaar zijn. Gebruik hiervoor de administratieve nulmeting.
Een leverancier die alleen een betere demonstratie laat zien, heeft nog geen eerdere fout opgelost. Vraag om dezelfde testgevallen en dezelfde beoordelingsregels. Verander je scope of gewenste uitkomst wezenlijk, behandel dat als een nieuwe proef. Een ontbrekende eigenaar, blijvende oncontroleerbare uitkomst of herhaald kritieke fout is geen reden voor onbeperkt verlengen.
Instructie voor een kritisch besluitgesprek
Vergelijk dit proefrapport uitsluitend met de oorspronkelijke criteria. Geef per criterium gehaald, niet gehaald of onvoldoende bewijs, met de bijbehorende gemeten waarden. Noem ontbrekend controlewerk en mogelijke meetverschillen. Vul geen resultaten aan, verander geen grens en kies niet namens de proceseigenaar. Maak een lijst afbouwacties met nog in te vullen eigenaar en datum.
Dit doe je vandaag
Zet voor de lopende proef drie dingen naast elkaar: de oorspronkelijke criteria, de gemeten uitkomst en de persoon die mag stoppen. Is een van die drie onbekend, los dat vóór verlenging op. Leg een besluitdatum vast en houd de bestaande werkwijze beschikbaar.
Veelgestelde vragen
Moet ik een AI-pilot stoppen als de tijdwinst tegenvalt?
Beoordeel de vooraf gekozen doelstelling. Een proef kan waarde hebben door minder herstel of een kleinere achterstand, maar verander het succescriterium niet achteraf. Rapporteer de tegenvallende tijdwinst en laat een eventueel ander doel als nieuw proefbesluit goedkeuren.
Wanneer is verlengen van een tegenvallende AI-proef verstandig?
Alleen als één concrete, herstelbare oorzaak bekend is en een beperkte hertest die oorzaak kan toetsen. Leg een nieuwe einddatum, maximaal extra budget en dezelfde beoordelingsregels vast. Verleng niet uitsluitend omdat er al veel tijd in zit.
Wie beslist dat de AI-pilot definitief wordt afgesloten?
De proceseigenaar onderbouwt het voorstel met de beoordelaar. De budgetverantwoordelijke keurt het afsluitbesluit en eventuele resterende kosten goed. Leg daarnaast vast wie toegang intrekt, concepten afhandelt en het handmatige proces hervat.
Voorbeelden zijn bedoeld om je eigen proef te ontwerpen. Ze zijn geen gemeten klantresultaten. Zo maken we deze kennisbank.