17 vragen om een AI-toepassing te selecteren

Als je een AI-toepassing wilt selecteren, bijvoorbeeld voor het genereren van een offerte, of een beleidsdocument, of voor een eenvoudige chatbot, dan kan je onderstaande vragen gebruiken om een eerste check te doen, of deze wel voldoet aan belangrijke voorwaarden. De aanname is dat de applicatie onderliggend een taalmodel gebruikt:

1. Welk taalmodel wordt er gebruikt binnen de applicatie? Een taalmodel op de eigen server (Llama of Gemma) of een taalmodel uit de cloud (openai, antrophic, google)
2. Is het mogelijk om te wisselen van taalmodel (gpt4, gpt3.5, claude, gemini of in de toekomst naar GPT-NL)?
3. Zijn de kosten van de AI-applicatie inclusief de kosten voor het gebruik van een taalmodel?
4. Waar worden eigen documenten of voorbeelddocumenten- c.q. sjablonen opgeslagen? Zowel op de server van de leverancier van de AI-applicatie, als bij de leverancier van het taalmodel?
5. Hoe goed is het model in de Nederlandse taal? Hoeveel klanten zijn er in NL?
6. Meer algemeen: Welke soorten gegevens verwerkt het systeem, en hoe worden deze opgeslagen?
7. Voldoet de applicatie aan de eisen van de AI-Act (waarschijnlijk low-risk)
8. Als onze concurrent ook de AI-applicatie gaat gebruiken, krijgen zijn dan soortgelijke output c.q. teksten (immers deze worden bepaald door de ingeprogrammeerde prompts)
9. Is het mogelijk om een documenten c.q. output te genereren in de huisstijl?
10. Is het mogelijk om de output altijd te checken op een 40-tal punten over duurzaamheid, circulariteit, ethiek, juridisch, en andere voor ons belangrijke punten?
    
11. Hoe flexibel is het systeem voor maatwerk of specifieke bedrijfsprocessen?
    Kan het systeem integreren met onze bestaande software (bijv. CRM, ERP)?
12. Is er uitgebreide Nederlandstalige (technische) documentatie beschikbaar voor het implementeren, gebruiken en aanpassen van het systeem?
13. Welke ondersteuning biedt de leverancier voor onboarding, training en probleemoplossing?
14. Hoe vaak wordt het systeem geüpdatet, en hoe worden nieuwe functies uitgerold?
15. Welke beveiligingsmaatregelen zijn ingebouwd om te beschermen tegen cyberaanvallen of datalekken?
16. Hoe vaak worden er beveiligingsaudits uitgevoerd op het platform?
17. Zijn er verborgen kosten voor functies zoals extra support of aanpassingen?

Door deze vragen te stellen die AI-specifiek zijn, en anderzijds algemeen, krijg je al een goed beeld van de functionaliteit en de bedrijfszekerheid van de betreffende AI-toepassing.