AI-leverancier selecteren: beoordeling van waarde, risico en leverbaarheid

Definitie en afbakening

Leveranciersselectie is het gestructureerd vergelijken van aanbieders tegen dezelfde eisen en praktijkscenario’s. Het omvat product, implementatiedienst, onderaannemers en relevante modelleveranciers. De keuze gaat niet alleen over functionaliteit. Dataflows, wijzigingsbeleid, support, exitmogelijkheden en de capaciteit van het eigen team bepalen mede of de oplossing leverbaar blijft.

Het herkenbare bedrijfsprobleem

Demo’s gebruiken schone voorbeelden en ervaren verkopers. De werkelijke omgeving bevat onvolledige invoer, uitzonderingen, toegangsrechten en piekbelasting. Als eisen en testset niet vooraf vaststaan, wint de aanbieder met de beste presentatie. Contractuele en operationele beperkingen worden pas zichtbaar nadat integratiekosten zijn gemaakt.

Stappenplan voor het selecteren van een AI-leverancier

1. Maak een probleemgerichte shortlist

Selecteer alleen aanbieders die het proces, volume en risiconiveau aantoonbaar begrijpen.

2. Gebruik gelijke scenario’s

Laat iedereen dezelfde gewone, moeilijke en foutieve voorbeelden verwerken.

3. Controleer dataflows

Breng opslag, training, subverwerkers, locaties en verwijdering in kaart.

4. Test integratie en beheer

Beoordeel logging, autorisatie, wijzigingen, incidenten en support.

5. Bereken totale kosten

Neem implementatie, intern werk, controle, groei, exit en migratie mee.

6. Onderhandel op bewijs

Koppel pilot, acceptatie en contractfase aan meetbare resultaten.

Beslismodel

| Beslispunt | Centrale vraag | Gewenst bewijs | Handelingsregel | |---|---|---|---| | Maak een probleemgerichte shortlist | Selecteer alleen aanbieders die het proces, volume en risiconiveau aantoonbaar begrijpen. | Procesdata, besluitlog en eigenaar | Doorgaan bij voldoende bewijs | | Gebruik gelijke scenario’s | Laat iedereen dezelfde gewone, moeilijke en foutieve voorbeelden verwerken. | Representatieve test, kostenraming en akkoord | Beperkt testen bij onzekerheid | | Controleer dataflows | Breng opslag, training, subverwerkers, locaties en verwijdering in kaart. | Procesdata, besluitlog en eigenaar | Stoppen of herontwerpen bij rode grens | | Test integratie en beheer | Beoordeel logging, autorisatie, wijzigingen, incidenten en support. | Representatieve test, kostenraming en akkoord | Doorgaan bij voldoende bewijs | | Bereken totale kosten | Neem implementatie, intern werk, controle, groei, exit en migratie mee. | Procesdata, besluitlog en eigenaar | Beperkt testen bij onzekerheid | | Onderhandel op bewijs | Koppel pilot, acceptatie en contractfase aan meetbare resultaten. | Representatieve test, kostenraming en akkoord | Stoppen of herontwerpen bij rode grens |

Lees dit model als beslisondersteuning voor het selecteren van een AI-leverancier, niet als automatische ranglijst. De stap ‘Test integratie en beheer’ verdient apart bewijs.

Praktijkvoorbeeld met invoer, berekening en uitkomst

Situatie

Een accountantskantoor vergelijkt drie leveranciers voor documentclassificatie.

Invoer

Leverancier A kost €36.000 per jaar en haalt 92 procent op de eigen demo. B kost €52.000 en haalt 88 procent op dezelfde representatieve klanttest. Bij kritieke documenttypen mist A 9 procent en B 1,5 procent. Jaarlijks zijn er 20.000 documenten.

Berekening

Een gemiddelde score verbergt de kritieke fouten. Als elke gemiste kritieke classificatie 18 minuten herstel vraagt, veroorzaakt A circa 540 hersteluren tegenover 90 bij B, vóór verdere gevolgkosten.

Zakelijke uitkomst

Het kantoor kiest niet automatisch de goedkoopste. Het waardeert herstelwerk, risico, integratie en exitvoorwaarden in één totale-kostenmodel.

Kosten en ROI correct berekenen

Bereken voor het selecteren van een AI-leverancier minstens een ondergrens, een realistisch scenario en een bovengrens. Baseer volume, tijd en tarief op de nulmeting en toets expliciet hoe het risico ‘een demo vervangt representatieve validatie’ de opbrengst kan verminderen.

Koppeling met de vijf lagen van de ROI-scan

In deze use-case verdient vooral de stap ‘gebruik gelijke scenario’s’ aandacht, omdat een aanname daar direct doorwerkt in de businesscase.

Lees daarnaast Eisen AI-leverancier, AI-implementatie uitbesteden, Wat kost AI-implementatie?.

Opties en scenario’s

| Scenario | Wanneer passend | Investering | Bewijs vóór opschaling | |---|---|---:|---| | Eerst meten | Selecteer alleen aanbieders die het proces, volume en risiconiveau aantoonbaar begrijpen. | Laag | Nulmeting en een afgebakende hypothese | | Beperkte pilot | Laat iedereen dezelfde gewone, moeilijke en foutieve voorbeelden verwerken. | Middel | Representatief bewijs voor de tweede proceskeuze | | Gefaseerd invoeren | Breng opslag, training, subverwerkers, locaties en verwijdering in kaart. | Middel tot hoog | Gehaalde grens en een bevoegde eigenaar | | Niet starten of stoppen | Een demo vervangt representatieve validatie | Beperkt verlies | Vastgelegd besluit en een proportioneel alternatief |

Risico’s en beheersmaatregelen

1. Een demo vervangt representatieve validatie

Leg in het risicoregister vast hoe het risico ‘een demo vervangt representatieve validatie’ bij het selecteren van een AI-leverancier zichtbaar wordt, wie actie neemt en welke grens tot pauzeren leidt. Verbind de maatregel aan test integratie en beheer en controleer haar met werkelijk gedrag en procesdata.

2. Modelprestatie wordt los van workflow beoordeeld

Leg in het risicoregister vast hoe het risico ‘modelprestatie wordt los van workflow beoordeeld’ bij het selecteren van een AI-leverancier zichtbaar wordt, wie actie neemt en welke grens tot pauzeren leidt. Verbind de maatregel aan bereken totale kosten en controleer haar met werkelijk gedrag en procesdata.

3. Exitkosten blijven onbesproken

Leg in het risicoregister vast hoe het risico ‘exitkosten blijven onbesproken’ bij het selecteren van een AI-leverancier zichtbaar wordt, wie actie neemt en welke grens tot pauzeren leidt. Verbind de maatregel aan onderhandel op bewijs en controleer haar met werkelijk gedrag en procesdata.

4. De leverancier beoordeelt zijn eigen succes

Leg in het risicoregister vast hoe het risico ‘de leverancier beoordeelt zijn eigen succes’ bij het selecteren van een AI-leverancier zichtbaar wordt, wie actie neemt en welke grens tot pauzeren leidt. Verbind de maatregel aan maak een probleemgerichte shortlist en controleer haar met werkelijk gedrag en procesdata.

Wanneer deze aanpak niet geschikt is

Dit beslismodel voor het selecteren van een AI-leverancier vervangt geen juridisch, financieel of sectorspecifiek onderzoek. De combinatie van het risico ‘modelprestatie wordt los van workflow beoordeeld’ en toepassingen met grote gevolgen voor mensen vraagt een concrete beoordeling door bevoegde deskundigen.

Pauzeer de uitvoering als de laatste stap, de stap ‘onderhandel op bewijs’, geen bevoegde eigenaar heeft, als representatieve gegevens ontbreken of als noodzakelijke controle niet uitvoerbaar is.

Veelgestelde vragen

Hoeveel AI-leveranciers moet je vergelijken?

Vergelijk genoeg serieuze alternatieven om prijs, aanpak en risico te toetsen. Drie kan praktisch zijn, maar kwaliteit van vergelijking is belangrijker dan een vast aantal.

Is een betaalde pilot normaal?

Ja, wanneer de pilot echt implementatiewerk en meetbaar bewijs oplevert. Leg eigendom, scope en vervolgverplichtingen vooraf vast.

Welke documenten vraag je op?

Onder meer beveiligingsinformatie, privacy- en datastromen, subverwerkers, servicevoorwaarden, wijzigingsbeleid, continuïteit en relevante audit- of testbewijzen.

Mag een leverancier klantdata gebruiken voor training?

Dat hangt af van doel, grondslag, contract en configuratie. Maak het expliciet en laat privacy- en juridische deskundigen de concrete situatie beoordelen.

Hoe vergelijk je maatwerk met software?

Gebruik dezelfde uitkomsten en totale kosten over een passende periode, inclusief intern beheer, aanpasbaarheid, lock-in en toekomstige wijzigingen.

Bronnen en officiële documentatie

• NIST AI Risk Management Framework
• EU AI Act, officiële verordening
• Europese Commissie, regelgevingskader voor AI
• ISO/IEC 42001, AI-managementsystemen

Verder lezen

• AI-implementatie
• AI ROI-scan
• Eisen AI-leverancier
• AI-implementatie uitbesteden
• Wat kost AI-implementatie?