Opens in a new tab

Hoe borg je datakwaliteit bij AI-automatisering?

Jaap de Roos ·
Data-analist bestudeert uitgeprinte rapporten op modern bureau met laptop met spreadsheets en vergrootglas op document.

Slechte data is de meest voorkomende reden dat AI-automatisering mislukt. Niet de technologie, niet het budget, niet het gebrek aan draagvlak. Als een AI-agent werkt met vervuilde, inconsistente of ongedefinieerde data, neemt hij beslissingen op basis van een vertekend beeld van de werkelijkheid. Dat geldt voor elke organisatie die AI serieus wil inzetten, van een middelgrote producent tot een financiële dienstverlener. Dit artikel beantwoordt de meest gestelde vragen over hoe je datakwaliteit borgt bij AI-automatisering, van de eerste risico-inventarisatie tot het beheer na livegang.

Welke databronnen vormen het grootste risico bij AI-automatisering?

De databronnen met het grootste risico bij AI-automatisering zijn bronnen die meerdere systemen bedienen, handmatig worden bijgehouden of geen formele eigenaar hebben. Denk aan CRM-systemen met duplicaten, ERP-exports die door medewerkers worden aangepast in Excel, of datawarehouses waarvan de definitie van “actieve klant” per afdeling verschilt.

In de praktijk zien we drie categorieën die keer op keer voor problemen zorgen:

  • Gedeelde bronbestanden zonder versiebeheer, waarbij meerdere teams dezelfde tabel aanpassen zonder dat wijzigingen worden bijgehouden
  • Legacysystemen die data exporteren in formaten die niet zijn gedocumenteerd, waardoor een AI-agent waarden verkeerd interpreteert
  • Realtime datastromen, zoals sensordata of transactiefeeds, die geen validatielaag hebben en direct als invoer dienen voor geautomatiseerde beslissingen

Het risico zit niet altijd in de technische kwaliteit van de data zelf. Vaak zit het in de semantische laag: wat betekent een bepaald veld precies? Als het ene systeem “omzet” registreert inclusief btw en het andere exclusief, en een AI-agent trekt daar conclusies uit, dan zijn die conclusies structureel verkeerd. De agent weet dat niet. Hij rekent gewoon verder.

Een inventarisatie van databronnen begint daarom niet met een technische audit, maar met de vraag: wie is eigenaar van deze data, en heeft die eigenaar formele afspraken gemaakt over wat erin staat en hoe het wordt aangeleverd? Zonder die afspraken, ook wel datacontracten genoemd, is elke databron een potentieel risico.

Wat zijn de gevolgen van slechte datakwaliteit voor AI-modellen?

Slechte datakwaliteit leidt bij AI-modellen tot een vaste escalatielijn: eerst onjuiste uitkomsten, dan verlies van vertrouwen bij gebruikers, en uiteindelijk een organisatie die haar eigen AI-systemen niet meer vertrouwt en stopt met het gebruik ervan. Dat is de werkelijke prijs, niet een technisch foutje dat je kunt patchen.

De meest zichtbare gevolgen zijn hallucinaties: een AI-agent die ontbrekende of tegenstrijdige data aanvult met plausibel klinkende maar feitelijk onjuiste informatie. Bij een chatbot is dat vervelend. Bij een agent die beslissingen neemt, zoals een inkooporder goedkeuren, een klantprofiel bijwerken of een prioritering maken in een serviceproces, zijn de gevolgen direct operationeel.

Hallucinaties en verkeerde beslissingen

Een AI-agent is fundamenteel anders dan een rapportagetool. Hij leest data, trekt conclusies en voert acties uit, vaak zonder dat een mens elke stap controleert. Als de invoerdata niet klopt, werkt de agent op basis van een verkeerd beeld van de werkelijkheid. Dat leidt niet tot een foutmelding, maar tot een zelfverzekerd uitgevoerde verkeerde actie.

Vertrouwensverlies en stagnatie

Zodra medewerkers merken dat de uitkomsten van een AI-systeem niet kloppen, stoppen ze met vertrouwen op dat systeem. Ze gaan handmatig controleren, dubbelchecken of omzeilen. Het systeem draait nog, maar het voegt geen waarde meer toe. Dit patroon is moeilijk terug te draaien: eenmaal verloren vertrouwen in een AI-toepassing herstelt zich zelden vanzelf. De investering in de technologie is dan gedaan, maar het rendement blijft uit.

Slechte datakwaliteit heeft ook gevolgen voor compliance. De EU AI Act en de AVG stellen eisen aan aantoonbare zorgvuldigheid, documentatie en audit trails. Als een organisatie niet kan laten zien op welke data een geautomatiseerde beslissing is gebaseerd, of als die data aantoonbaar onbetrouwbaar was, is dat een juridisch en reputatierisico. Raadpleeg voor de specifieke implicaties voor jouw organisatie altijd een eigen juridisch adviseur.

Hoe stel je datakwaliteitsnormen in vóór een AI-implementatie?

Datakwaliteitsnormen stel je in vóór een AI-implementatie door per databron vast te leggen wat “goed genoeg” betekent: welke velden zijn verplicht, welke waarden zijn toegestaan, hoe actueel de data moet zijn en wie verantwoordelijk is als de norm niet wordt gehaald. Dit doe je voordat de eerste agent live gaat, niet erna.

Een werkbare aanpak volgt drie stappen:

  1. Bepaal welke databronnen de agent gebruikt en welke velden hij nodig heeft om zijn taak correct uit te voeren
  2. Stel per veld een norm vast: volledigheid, nauwkeurigheid, actualiteit en consistentie met andere systemen
  3. Leg vast wie eigenaar is van elke bron en formaliseer dat in een datacontract: een afspraak over hoe en wanneer data wordt aangeleverd, en wat er gebeurt als de kwaliteit afwijkt

Daarbovenop komt de semantische laag. Zorg dat kernbegrippen als “klant”, “actief contract” of “omzet” eenduidig zijn gedefinieerd en dat die definitie consistent is in alle systemen die de agent raadpleegt. Een agent die met drie verschillende definities van hetzelfde begrip werkt, maakt fouten die je niet ziet aankomen.

Procesvolwassenheid speelt hier ook een rol. Als het werk dat de agent ondersteunt afhankelijk is van impliciete kennis bij individuele medewerkers, en niet is gedocumenteerd als herhaalbaar proces, dan ontbreekt de basis om te bepalen wat de agent precies moet doen en op welke data hij zich moet baseren. Documenteer het proces eerst, dan de data-eisen, dan de agent.

Welke technische maatregelen valideren data automatisch in een AI-pipeline?

Data automatisch valideren in een AI-pipeline doe je met drie lagen van technische maatregelen: schemachecks bij binnenkomst van data, statistische kwaliteitscontroles op de inhoud, en monitoring van datadrift in productie. Samen zorgen ze ervoor dat een AI-agent alleen werkt met data die aan de vooraf gestelde normen voldoet.

Validatie aan de ingang van de pipeline

De eerste laag is schemavalidatie: controleer bij elke databatch of de structuur klopt. Zijn de verwachte velden aanwezig? Kloppen de datatypes? Vallen de waarden binnen de toegestane ranges? Dit is de minimumdrempel. Een record dat hier niet doorheen komt, bereikt de agent niet.

Aanvullend kun je regels instellen voor referentiële integriteit: als een klant-ID in het ene systeem niet bestaat in het andere, is er een probleem dat je wilt opvangen voordat de agent er iets mee doet.

Statistische controles en anomaliedetectie

De tweede laag kijkt naar de inhoud. Statistische controles signaleren afwijkingen die structureel correct zijn maar inhoudelijk verdacht: een plotselinge piek in het aantal transacties, een gemiddelde orderwaarde die ineens verdubbelt, of een percentage ontbrekende waarden dat stijgt. Anomaliedetectie automatiseert dit en zorgt dat een menselijke eigenaar een signaal krijgt voordat de agent op basis van die data handelt.

Monitoring op datadrift

De derde laag bewaakt wat er in de loop van de tijd verandert. Datadrift treedt op als de statistische eigenschappen van de invoerdata verschuiven ten opzichte van de data waarop het model is getraind of geconfigureerd. Een AI-agent die is ingesteld op een bepaald patroon, presteert slechter als dat patroon verandert zonder dat hij dat weet. Monitoring op drift geeft je een vroeg signaal dat een hertraining of herconfiguratie nodig is.

Naast deze drie lagen is observability op het niveau van de agent zelf relevant: wat vraagt de agent op, welke acties voert hij uit, en klopt de output met wat je verwacht? Zonder zicht op wat de agent in productie doet, heb je geen basis om bij te sturen. Het AIConnected platform voor AI-observability biedt hiervoor een concrete aanpak.

Hoe houd je datakwaliteit geborgd na de livegang van AI?

Datakwaliteit borgen na de livegang van AI vraagt om structurele monitoring, heldere eigenaarschappen en een vastgesteld proces voor als de kwaliteit afwijkt. Livegang is geen eindpunt. Het is het moment waarop de echte test begint.

De meest effectieve aanpak na livegang combineert technische monitoring met organisatorische afspraken:

  • Stel dashboards in die de kwaliteitsscores van databronnen continu bijhouden en afwijkingen direct signaleren aan de verantwoordelijke eigenaar
  • Plan periodieke reviews van de datacontracten, zodat afspraken over aanlevering en kwaliteit actueel blijven als systemen of processen veranderen
  • Houd bij welke beslissingen de agent neemt en vergelijk die periodiek met de verwachte uitkomsten, zodat je degradatie in kwaliteit vroeg signaleert
  • Leg escalatiepaden vast: wie beslist er als de kwaliteitsdrempel niet wordt gehaald, en mag de agent dan nog zelfstandig doorpakken of niet?

Een punt dat vaak wordt onderschat: medewerkers die met de uitkomsten van de agent werken, zijn een waardevolle bron van kwaliteitssignalen. Als zij merken dat iets niet klopt, moeten ze dat eenvoudig kunnen melden en moet dat signaal ook daadwerkelijk worden opgepakt. Dat vraagt om AI-literacy in de organisatie: medewerkers die begrijpen wat de agent doet, wat hij niet kan, en hoe ze een afwijking herkennen.

De waardehypothese is hier het kompas. Stel jezelf periodiek de vraag: lost de agent nog steeds het probleem op waarvoor hij is ingezet, voor de mensen die dat probleem ervaren, en ziet succes er nog steeds zo uit als je van tevoren had bepaald? Als het antwoord nee is, is dat het signaal om te herijken, niet om door te gaan op de oude voet. De Connect & Build aanpak voor AI-implementatie biedt hiervoor een gestructureerd kader.

Hoe wij helpen bij datakwaliteit en AI-automatisering

Datakwaliteit borgen bij AI-automatisering raakt meerdere vakgebieden tegelijk: data-engineering, datagovernance, procesontwerp, security en organisatieverandering. Dat is precies het soort vraagstuk waarbij een generalist tekortschiet en waarbij je ook niet bij vijf losse leveranciers wilt aankloppen.

Wij werken met het AI Foundationsmodel voor duurzame AI-implementatie, een raamwerk van negen fundamenten verdeeld over drie lagen. Datakwaliteit en datacontracten vormen het eerste fundament, maar ze staan nooit los van de rest. Governance, semantiek, procesvolwassenheid en observability hangen er direct mee samen. Wij brengen per fundament de specialist aan die er het sterkst in is, en wij nemen de regie zodat die specialismen op elkaar aansluiten.

Een concreet startpunt is de Foundation Scan: drie gerichte gesprekken van elk circa 45 minuten, verdeeld over de drie lagen van het model. De totale tijdsinvestering voor jouw organisatie is twee tot drie uur. De uitkomst is een score per fundament op een driepuntsschaal, zodat je precies weet waar de risico’s zitten voordat je de eerste agent live brengt.

  • Inzicht in de volwassenheid van jouw databronnen, governance en processen
  • Een concreet beeld van welke fundamenten aandacht nodig hebben voor de eerste agent
  • Een aanpak op basis van parallelle volwassenheid: niet eerst twee jaar fundamenten bouwen, maar klein beginnen en per agent de basis meegroeien

Wil je weten waar jouw organisatie staat? Neem contact op met onze specialisten voor een Foundation Scan en krijg binnen een halve dag een helder beeld van de risico’s en de volgende stap.

Related Articles