Doorlichting & evaluatie
Een leverancier, een investering of een pilot die naar productie wil: doorgelicht voordat het besluit valt.
- Aanleiding
- Een deal, pilot of inkoop van AI ligt op tafel.
- Resultaat
- Een onderbouwde beoordeling: de feiten, de risico's en de voorwaarden.
Gaat het nog niet om één concreet voorstel, maar om de vraag waar AI wel en niet waarde toevoegt, dan is AI & Strategie de passende dienst.
Voor een investering, aankoop of opschaling van AI wordt meestal de documentatie beoordeeld. EvAluate beoordeelt het systeem zelf: het model, de data en de cijfers eronder.
Aanpak
- Documenten en gesprekken. Met bouwers, gebruikers en de verkopende partij.
- Techniek. Werkt het model zoals beweerd, hoe robuust is het, wat gebeurt er bij randgevallen.
- Cijfers. Kosten nu en in productie, de aannames onder de verwachte opbrengst, claims van de verkoper.
- Organisatie en regels. Team, afhankelijkheden, beheersbaarheid na overdracht, AVG en EU AI Act.
- Bij een pilot. Houdt het resultaat stand buiten de proefopstelling.
Wat het oplevert
- Rapport met beoordeling: de feiten, de risico's en de voorwaarden.
- Risico's gewogen op gevolg en kans.
- Voorwaarden voor het contract of het opschalingsplan.
- Mondelinge toelichting aan wie beslist.
Achtergrond
Vijf jaar financiële audits en IT-audits bij Deloitte, met cijfers en systemen naast elkaar. Vier jaar technische evaluaties van AI-systemen zelf binnen de Rijksoverheid, tot op het niveau van model en data. Vanuit EvAluate de beoordeling van een HR-toepassing met AI voor een gemeente. Aan de UvA onderzoek naar het evalueren en auditen van generatieve en agentic AI, op bias en security.