Om de gerealiseerde waarde van AI af te zetten tegen de oorspronkelijke businesscase, moet je vóór de implementatie meetbare succesindicatoren vaststellen, een referentiepunt voor de periode vóór de AI-implementatie vastleggen en vervolgens de daadwerkelijke resultaten na de implementatie regelmatig met die benchmarks vergelijken. De kloof tussen wat er van AI werd verwacht en wat het daadwerkelijk oplevert, wordt pas zichtbaar als u vanaf dag één over een gestructureerd meetkader beschikt. De onderstaande vragen lichten elk onderdeel van dat proces in praktische termen toe.
Welke indicatoren geven daadwerkelijk weer welke waarde AI na de implementatie heeft opgeleverd?
De gerealiseerde waarde van AI wordt gemeten aan de hand van een combinatie van financiële resultaten, operationele verbeteringen en bedrijfsresultaten die expliciet in de oorspronkelijke businesscase waren vastgelegd. De meest bruikbare maatstaven vallen uiteen in drie categorieën: kostenbesparing (minder personeelsuren, lagere foutenpercentages, lagere verwerkingskosten), omzetimpact (snellere doorlooptijden, hogere doorvoer, verbeterde klantconversie) en risicobeperking (minder compliance-incidenten, minder handmatige ingrepen, verbeterde audittrails).
Het belangrijke verschil is dat deze maatstaven moeten worden afgestemd op het specifieke gebruiksscenario. Een AI-systeem voor de afhandeling van schadeclaims moet worden beoordeeld op basis van het aantal afgehandelde schadeclaims per uur en het foutenpercentage, en niet op basis van algemene scores voor AI-toepassing. Als je de verkeerde maatstaven hanteert, wek je de schijn van toegevoegde waarde zonder dat je hebt gecontroleerd of de businesscase daadwerkelijk is gerealiseerd.
- Financiële kengetallen: Kosten per transactie, bespaarde arbeidsuren, totale eigendomskosten van AI versus geleverde waarde
- Operationele indicatoren: Procesduur, doorvoervolume, fout- of uitzonderingspercentages
- Strategische indicatoren: Snelle besluitvorming, tijd van medewerkers die wordt ingezet voor werk met een hogere toegevoegde waarde, klanttevredenheidsscores
- Financiële kengetallen op IT-gebied: Uitgaven voor AI-infrastructuur ten opzichte van het budget, kosten per AI-gestuurd resultaat
Door deze indicatoren te koppelen aan gegevens over het financiële beheer van de IT krijgt u een volledig beeld. Wanneer u de kosten van de AI-infrastructuur bijhoudt in combinatie met de bedrijfsresultaten die deze kosten opleveren, kunt u een zinvol rendement berekenen in plaats van activiteiten afzonderlijk te rapporteren.
Waarom komen de resultaten van AI-businesscases zo vaak niet overeen met de daadwerkelijke uitkomsten?
Businesscases op het gebied van AI komen niet overeen met de daadwerkelijke resultaten, voornamelijk omdat de oorspronkelijke aannames niet zijn getoetst aan de werkelijke bedrijfsomstandigheden. De verwachte voordelen worden vaak gemodelleerd op basis van ideale omstandigheden, terwijl de implementatie voor wrijving zorgt: problemen met de gegevenskwaliteit, weerstand bij verandermanagement, vertragingen bij de integratie en scope creep vergroten allemaal de kloof tussen prognose en werkelijkheid.
In grote organisaties wordt dit nog verergerd door een aantal structurele problemen. Businesscases worden vaak opgesteld door projectteams die na de ingebruikname weer verdergaan met andere taken, waardoor er niemand meer is die verantwoordelijk is voor het bijhouden of de verwachte besparingen ook daadwerkelijk zijn gerealiseerd. De voordelen worden eenmalig ingeschat en worden nooit meer herzien naarmate het AI-systeem zich verder ontwikkelt of de bedrijfscontext verandert.
Daarnaast is er een meetprobleem. Veel organisaties houden de output van AI bij, zoals het aantal gemaakte voorspellingen of geautomatiseerde taken, zonder die output te koppelen aan de financiële of operationele resultaten die de investering rechtvaardigden. Dit leidt tot een lacune in de rapportage: het systeem lijkt wel te werken, maar de businesscase blijft onbevestigd.
Ten slotte stijgen de kosten van AI na de implementatie vaak naarmate het gebruik toeneemt, modellen opnieuw moeten worden getraind en de integratie complexer wordt. Als in de businesscase geen rekening is gehouden met deze doorlopende kosten, zal het daadwerkelijke rendement altijd slechter uitvallen dan verwacht, zelfs als de AI naar behoren functioneert.
Hoe stel je een uitgangssituatie vast voordat de AI in gebruik wordt genomen?
Het vaststellen van een pre-AI-referentiepunt houdt in dat de huidige stand van zaken van het proces, de kosten of het resultaat – dat de AI moet verbeteren – wordt vastgelegd aan de hand van gegevens die zijn verzameld voordat het systeem in gebruik is genomen. Zonder dit referentiepunt heb je geen maatstaf om veranderingen aan af te meten, en is het onmogelijk om verbeteringen na de implementatie met zekerheid aan de AI toe te schrijven.
Een bruikbare referentie omvat drie aspecten: de huidige kosten voor het uitvoeren van het proces (arbeid, gereedschap, foutcorrectie), het huidige prestatieniveau (cyclustijd, doorvoer, nauwkeurigheid) en het huidige bedrijfsresultaat (gegenereerde omzet, risico-incidenten, klanttevredenheid). Deze aspecten moeten worden gemeten over een representatieve periode, en niet aan de hand van een eenmalige momentopname, om rekening te houden met seizoensgebonden variaties of schommelingen in het proces.
In de praktijk slaan veel organisaties deze stap over, omdat het AI-project al in volle gang is op het moment dat de meetplanning van start gaat. Het gevolg is dat de rapportage na de implementatie gebaseerd is op schattingen van wat de uitgangssituatie was, wat de geloofwaardigheid van elke bewering over de toegevoegde waarde ondermijnt. Het opnemen van metingen van de uitgangssituatie in het projectplan, idealiter gecoördineerd via uw portefeuillebeheer proces zorgt ervoor dat dit gebeurt voordat het venster wordt gesloten.
Wat is het verschil tussen het bijhouden van AI-output en het realiseren van waarde?
Bij het bijhouden van AI-output wordt gemeten wat het systeem produceert, zoals het aantal verwerkte documenten, het aantal gegenereerde aanbevelingen of het aantal gesignaleerde afwijkingen. Bij waarderealisatie wordt gemeten of die output zich heeft vertaald in de bedrijfsresultaten die de investering rechtvaardigden, zoals lagere verwerkingskosten, snellere besluitvorming of minder nalevingsproblemen. Het bijhouden van output is noodzakelijk, maar op zichzelf niet voldoende voor waarderealisatie.
Dit onderscheid is belangrijk omdat AI-systemen zeer actief kunnen zijn zonder dat ze bedrijfswaarde opleveren. Een model dat duizenden aanbevelingen genereert waar niemand iets mee doet, produceert wel output, maar levert geen waarde op. Een systeem voor fraudedetectie dat transacties weliswaar nauwkeurig signaleert, maar waarvan de waarschuwingen door de operationele teams worden genegeerd, levert niet de risicoreductie op die in de businesscase was beloofd.
Om waarde te realiseren is een bewijsketen nodig: de AI genereert een output, die output leidt tot een handeling door een mens of een geautomatiseerd systeem, en die handeling levert een meetbaar bedrijfsresultaat op. Als die keten op enig moment wordt onderbroken, gaat er waarde verloren en zal de businesscase niet worden gehaald, ongeacht hoe goed de AI technisch presteert.
Wie is er verantwoordelijk voor het bijhouden van de waarde van AI in grote organisaties?
In grote organisaties werkt het bijhouden van de waarde van AI het beste wanneer de verantwoordelijkheid wordt verdeeld over drie functies: de business owner die de oorspronkelijke businesscase voor de AI-investering heeft opgesteld, het IT- of datateam dat het systeem beheert, en de financiële afdeling die kan controleren of de verwachte financiële voordelen daadwerkelijk zijn gerealiseerd. Geen enkele functie heeft volledig inzicht, en daarom leidt een gescheiden verantwoordelijkheid steevast tot hiaten in de metingen.
De ondernemer is verantwoordelijk voor het controleren of de operationele resultaten overeenkomen met de prognoses. Het IT-team is verantwoordelijk voor het bijhouden van de systeemprestaties, het gebruik en de infrastructuurkosten. De financiële afdeling is verantwoordelijk voor het afstemmen van de werkelijke kosten en besparingen met de financiële gegevens uit de businesscase. Wanneer deze drie functies onafhankelijk van elkaar opereren, worden investeringen in AI vaak standaard niet gemeten.
In een praktisch bestuursmodel wordt voor elk AI-initiatief een specifieke ‘benefit owner’ aangewezen, met een vastgestelde evaluatiefrequentie – doorgaans per kwartaal – waarbij de ‘benefit owner’ verslag uitbrengt over de gerealiseerde waarde ten opzichte van de businesscase. Dit sluit aan bij de werkwijzen voor het realiseren van voordelen die worden toegepast in volwassen projectportfoliobeheer en past deze specifiek toe op AI-investeringen. Door dit bestuursmodel te koppelen aan uw bredere FinOps en de praktijken op het gebied van IT-financieel beheer zorgen ervoor dat gegevens over de kosten en waarde van AI worden opgenomen in dezelfde rapportagestructuren die ook voor andere technologische investeringen worden gebruikt.
Welke hulpmiddelen ondersteunen het doorlopend meten en rapporteren van de waarde van AI?
De tools die het meten van de waarde van AI ondersteunen, vallen uiteen in twee categorieën: tools die de prestaties en het gebruik van AI-systemen bijhouden, en tools die die prestatiegegevens koppelen aan financiële en zakelijke resultaten. Voor een effectieve meting zijn beide nodig, omdat technische monitoring alleen niet voldoende is om te bepalen of de investering vruchten afwerpt.
Op technisch vlak houden modelmonitoringplatforms de voorspellingsnauwkeurigheid, gegevensafwijkingen en de beschikbaarheid van het systeem bij. Deze tools geven aan of de AI correct functioneert, maar niet of deze daadwerkelijk waarde oplevert. Op financieel vlak kunt u met IT-financieelbeheerplatforms de kosten voor AI-infrastructuur toewijzen aan specifieke gebruiksscenario’s, de uitgaven vergelijken met het budget en de kosten per resultaat berekenen.
De meest bruikbare rapportageomgeving combineert deze gegevensbronnen in één overzicht dat zowel door een bedrijfseigenaar, een IT-leider als een financiële partner kan worden geïnterpreteerd. Dit houdt doorgaans in dat AI-kostengegevens uit cloudfactureringstools worden gekoppeld aan gegevens over bedrijfsresultaten uit operationele systemen, en dat beide worden weergegeven via een gedeeld dashboard of een rapportagelaag. Zodra deze integratie is gerealiseerd, kunt u op elk moment de kernvraag beantwoorden: levert deze AI-investering het verwachte rendement op, en zo niet, waar zit dan de kloof?
Hoe wij u helpen de waarde van uw AI-investeringen te volgen en te realiseren
Het meten van de gerealiseerde waarde van AI is uiteindelijk een uitdaging op het gebied van financieel IT-beheer. De technische aspecten (modelprestaties, gebruiksgegevens en infrastructuurkosten) zijn pas zinvol als ze worden gekoppeld aan de bedrijfsresultaten en financiële verplichtingen die in eerste instantie bepalend waren voor de investering. Voor die koppeling zijn het juiste bestuur, de juiste gegevensstructuren en de juiste rapportagefrequentie nodig.
Wij helpen grote organisaties bij het opbouwen en onderhouden van die band. Concreet ondersteunen wij u met:
- Definitie van de uitgangswaarde en meetopzet: Voordat je AI in gebruik wordt genomen, helpen we je bij het vastleggen van de huidige statistieken, die als referentiepunt zullen dienen voor het bijhouden van de toegevoegde waarde
- Kostenverdeling voor AI-workloads: Wij brengen uw kostengegevens voor de cloud en infrastructuur in kaart, zodat uw AI-uitgaven inzichtelijk, toewijsbaar en vergelijkbaar zijn met de geraamde kosten
- Beheer van de realisatie van voordelen: We stellen het eigendomsmodel, de frequentie van de evaluaties en de rapportagevorm vast, zodat de waarde van AI ook na de ingebruikname actief wordt bijgehouden
- Integratie met TBM- en FinOps-raamwerken: Wij koppelen AI-investeringsgegevens aan uw bredere financiële IT-beheerprocessen, zodat het bijhouden van het AI-rendement plaatsvindt binnen dezelfde bestuursstructuur als uw andere technologische investeringen
- Rapportage op basis waarvan direct beslissingen kunnen worden genomen: We ontwikkelen rapportages die ondernemers, IT-managers en financiële partners een gezamenlijk, betrouwbaar beeld geven van de gerealiseerde waarde ten opzichte van de oorspronkelijke businesscase
Als je de overstap wilt maken van het bijhouden van AI-resultaten naar het aantonen van de daadwerkelijk gerealiseerde waarde van AI, neem contact met ons op om te bespreken hoe wij uw organisatie kunnen ondersteunen.