01
De vraag komt eerst, niet de techniek
Welke vraag stelt het MT nu aan een analist, en hoe lang duurt het voordat er antwoord komt? Die ene vraag is het onderwerp van de dag.
OneDayBuild, het bouwdagmerk van Appfront
Een AI-assistent die je eigen data bevraagt, valideren
Iedereen wil een assistent die in gewone taal antwoord geeft op vragen over de eigen cijfers. Of dat bij jou werkt, hangt niet af van het model maar van je data: hoe die eruitziet, hoe schoon hij is en of de vraag die je stelt er überhaupt uit te halen valt. Dat weet je pas als je het op echte gegevens probeert.
- Eén werkdag
- Werkend prototype
- Code in je eigen repository
01/06
Waarom een demo op voorbeelddata niets bewijst
Elke leverancier kan een assistent laten zien die vlekkeloos antwoordt. Op zijn data.
Het verschil tussen een demo en jouw situatie zit zelden in het taalmodel. Het zit in de vraag of jouw omzetcijfer op vier plekken anders wordt berekend, of je klantnamen in drie systemen anders gespeld staan, en of er achter de vraag „hoe liep het vorige kwartaal in het noorden” een veld zit dat „noorden” betekent. Die dingen ontdek je niet in een offerte.
Er is nog een verschil dat pas op echte data zichtbaar wordt: het gedrag bij een vraag die niet te beantwoorden is. Een assistent die dan een aannemelijk getal noemt, is gevaarlijker dan geen assistent. Wat je wilt zien, is of hij zegt dat hij het niet weet, en of hij bij elk antwoord laat zien waar het vandaan komt.
Een bouwdag is bedoeld om precies dat te laten zien. Niet het hele systeem, maar één echte vraag van één echte gebruiker, op een uitsnede van je eigen gegevens, met de bron erbij.
02
Bronvermelding is geen extra
Zonder de plek waar een antwoord vandaan komt, kun je het niet controleren en dus niet vertrouwen. Dat is de eerste eis, niet de laatste.
03
Niet weten is een functie
De moeilijkste eigenschap om te bouwen en de belangrijkste om te hebben. Een assistent die altijd antwoordt, is precies de assistent die je in de bestuurskamer niet wilt.
02/06
Wat valt binnen en buiten de bouwdag
Binnen scope
- Een werkende assistent die één soort vraag beantwoordt op een uitsnede van je echte gegevens.
- Bronvermelding bij elk antwoord, zodat je kunt nakijken waar het getal vandaan komt.
- Een eerlijk beeld van wat er misgaat: de vragen waarop hij het antwoord schuldig blijft.
- Een live URL en de code in je eigen repository, zodat je verder kunt zonder ons.
Buiten scope
- Het opschonen van je databronnen. Als het omzetcijfer op vier plekken anders wordt berekend, lossen we dat niet in een dag op.
- Koppelingen met al je systemen. We nemen er één, en die is genoeg om de vraag te beantwoorden.
- Beveiliging en autorisatie op productieniveau. Wat er in de dag staat, is een prototype, geen systeem voor de hele organisatie.
- Een oordeel over welk model of welke leverancier je moet kiezen. Dat gesprek voer je pas als je weet dat het kan.
03/06
Hoe de bouwdag verloopt
- Stap 1
De vraag kiezen
Welke vraag stelt iemand nu aan een collega en wacht daar dagen op? Die kiezen we, niet een categorie vragen.
- Stap 2
Kijken naar de echte data
Een uitsnede van je eigen gegevens, geen voorbeeldbestand. Hier blijkt vaak al de helft van het antwoord.
- Stap 3
Bouwen wat de vraag beantwoordt
De kortste weg van vraag naar antwoord, met de bron erbij.
- Stap 4
Proberen te breken
Vragen stellen die er net naast liggen, om te zien of hij dan gokt of zwijgt.
- Stap 5
Laten zien aan iemand die het moet gebruiken
Niet aan de projectleider maar aan degene die de vraag normaal stelt.
- Stap 6
Vastleggen wat er niet lukte
De vragen die onbeantwoord bleven zijn de opbrengst van de dag, niet de bijvangst.
Volgende stap
Wil je dit weten voordat je investeert?
Vertel welke vraag jullie nu aan een analist stellen en hoe lang het duurt voordat er antwoord komt. In een korte intake bepalen we of daar een bouwdag omheen te bouwen is en welke uitsnede van je gegevens we daarvoor nodig hebben.
04/06
Eerlijk over een assistent op eigen data
- Je data bepaalt de uitkomst, niet wij. Staat hetzelfde cijfer in vier systemen anders, dan komt dat er in één dag niet uit. Wat er wel uitkomt, is dat je het weet en kunt aanwijzen.
- Een dag is geen productie. Wat er staat draait op een uitsnede en heeft geen autorisatie per gebruiker. Dat hoort bij een vervolgtraject, niet bij een bouwdag.
- Soms is het antwoord: dit hoeft niet met AI. Als de vraag altijd hetzelfde is, is een vast rapport goedkoper, sneller en betrouwbaarder. Dat zeggen we dan ook.
- Kosten per vraag lopen door. Een taalmodel kost geld per gesprek. Bij een assistent die de hele dag door bevraagd wordt, is dat een post die je vooraf wilt uitrekenen.
05/06
Twee manieren om verder te gaan
De bouwdag maakt je idee aantoonbaar. Wil je daarna doorbouwen naar een volwaardige applicatie, dan doet Appfront dat traject.
Eén bouwdag, OneDayBuild
- Je wilt weten of het kan voordat je een traject of een licentie ingaat.
- Aan het eind van de dag is er een werkende versie op je eigen gegevens, plus een lijst met wat niet lukte.
- Één dag, vaste prijs, code in je eigen repository.
Volledig traject, Appfront
- Het werkt, en je wilt een assistent die de hele organisatie bedient.
- Autorisatie per gebruiker, koppelingen met meerdere bronnen, beheer en doorontwikkeling.
- Dat traject doet Appfront, met dezelfde mensen.
06/06
Veelgestelde vragen
Werkt dit ook als onze data rommelig is?
Vaak wel, maar niet overal. Een bouwdag laat precies zien waar het misgaat: welke vraag hij kan beantwoorden en welke niet omdat het veld ontbreekt of op drie plekken anders is gevuld. Dat inzicht is de opbrengst; het opschonen zelf is een apart traject.
Gaan onze gegevens naar buiten?
Dat bepaal je zelf en we spreken het vooraf af. Er zijn opstellingen waarbij de gegevens je eigen omgeving niet verlaten en opstellingen waarbij ze naar een externe dienst gaan. Dat verschil raakt de kosten en de doorlooptijd, dus het hoort in de intake thuis.
Wat als hij een verkeerd antwoord geeft?
Dat gebeurt, en het is precies wat je in een dag wilt zien. Daarom bouwen we bronvermelding vanaf het begin en proberen we hem te breken met vragen die er net naast liggen. Een assistent die netjes zegt dat hij het niet weet, is bruikbaar; een die gokt niet.
Is één dag niet te kort?
Voor een compleet systeem wel, voor een antwoord op de vraag „kan dit” niet. Je krijgt geen product maar een werkend bewijs op je eigen gegevens, en dat is precies wat er ontbreekt in de offertes die je nu vergelijkt.
Wat kost het vervolg?
Dat hangt af van wat de dag laat zien. Blijkt de data goed genoeg en de vraag scherp, dan is het vervolg overzichtelijk. Blijkt het tegendeel, dan heb je een dure vergissing voorkomen, en dat is dezelfde opbrengst.
