Kiwop Labs · kwartaalreeks
AI-agenten in productie
Wat de agenten van Nexo, het platform waarmee Kiwop werkt, echt doen: runs, fouten, voorstellen die een mens ondertekent of verwerpt, PR’s van de autonome worker, geclassificeerde e-mail en kosten. Een venster van 90 dagen, van 3 juli 2026 tot 1 oktober 2026. Geen namen, geen teksten, geen beloftes.
Wat het kwartaal zegt
- 28 verschillende agenten draaiden 1.293 keer; 93,7 % eindigde zonder fout. De mediane run duurt 88 s en de traagste 10 % gaat boven 175 s.
- Agenten stelden 500 taakopmerkingen voor; 168 waren voor de klant en een mens ondertekende er 90 (53,6 %). De rest is verworpen of wacht nog. Ondertekenen duurt mediaan 78,2 uur: menselijke beoordeling is geen formaliteit.
- De autonome worker claimde 25 gedelegeerde taken en leverde 18 PR’s op, met mediaan 0,7 uur tussen claimen en opleveren. De directeur beoordeelde 155 taken en delegeerde er slechts 23.
- Bij e-mail behandelde de classificeerder 216 inkomende threads en maakte 31 taken aan; de bewaker beoordeelde 1.247 uitgaande berichten en blokkeerde er 111. Mensen accepteerden 68,8 % van zijn suggesties.
- Kosten: 762 € via API gefactureerd in het venster, plus 1.736 € abonnementsverbruik gewaardeerd tegen API-prijzen. De CLI op de server verbruikte 3.284 $ tegen lijstprijs, waarvan 32 % door de autonome worker.
Proactieve agenten
De wachters: agenten die zelf afgaan (per cron, per gebeurtenis of door een andere run), de projectstatus lezen en iets voorstellen of waarschuwen. Elke run slaat status, duur en waarschuwingsniveau op.
| Meetwaarde | Waarde |
|---|---|
| Runs | 1.293 |
| Voltooid | 1.212 |
| Mislukt | 69 |
| Succes (%) | 93,7 |
| Actieve agenten | 28 |
| Mediane duur (s) | 88 |
| Duur p90 (s) | 175 |
| Per waarschuwingsniveau | warning: 230 · ok: 910 · sin nivel: 81 · critical: 72 |
Voorstellen ondertekend door een mens
Een door een agent geschreven opmerking ontstaat als in afwachting en onzichtbaar, tot de persoon op wiens naam hij verschijnt hem in de webapp ondertekent. Ondertekenen via API bestaat niet. Dit is het echte menselijke acceptatiepercentage, geen schatting.
| Meetwaarde | Waarde |
|---|---|
| Voorgestelde opmerkingen | 500 |
| Interne notities | 332 |
| Voor de klant | 168 |
| Ondertekend | 354 |
| Ondertekend (%) | 70,8 |
| Voor de klant, ondertekend | 90 |
| Voor de klant, ondertekend (%) | 53,6 |
| Uren tot ondertekening (mediaan) | 78,2 |
Autonome worker en taakdirecteur
De directeur beoordeelt elke nieuwe taak en beslist of hij ze delegeert aan de worker (een Claude Code op de server) of aan een mens laat. De worker claimt, werkt in een geïsoleerde worktree en levert een PR op. Niemand merget voor hem.
| Meetwaarde | Waarde |
|---|---|
| Door de worker geclaimde taken | 25 |
| Opgeleverde PR’s | 18 |
| Uren van claimen tot opleveren (mediaan) | 0,7 |
| Worker-passes | 48.987 |
| Gemiddelde wachtrij | 0 |
| Door de directeur beoordeelde taken | 155 |
| Gedelegeerd aan de worker | 23 |
| Overgedragen aan een mens | 10 |
E-mail: classificeerder en bewaker
De classificeerder leest inkomende e-mail en beslist of het een taak, een antwoord of ruis is, met zijn vertrouwen. De bewaker beoordeelt uitgaande e-mail voor verzending en geeft ok, suggestie of blokkade terug. Beide worden door een mens gecorrigeerd.
| Meetwaarde | Waarde |
|---|---|
| Geclassificeerde threads | 216 |
| Per type | reply: 130 · ignore: 45 · task: 41 |
| Per vertrouwen | sin dato: 157 · high: 40 · low: 19 |
| Classificeerder mislukt (%) | 4,6 |
| Mediane latentie (ms) | 10.249 |
| Met beslissing | 124 |
| Per beslissing | thread_duplicate: 19 · sin decidir: 73 · mirrored: 28 · auto_attached: 65 · auto_created: 31 |
| Aangemaakte taken | 31 |
| Beoordelingen | 1.247 |
| Per oordeel | suggest: 93 · block: 111 · ok: 1.043 |
| Geaccepteerde suggesties (%) | 68,8 |
| Mediane latentie (ms) | 7.849 |
| Suggesties per beoordeling (gemiddeld) | 0,24 |
Vragen aan het huiscriterium
Agenten en het team vragen het “brein” (het gedocumenteerde criterium van het huis) voordat ze beslissen. Haalt het antwoord de minimale gelijkenis niet, dan wordt het naar een mens geëscaleerd.
| Meetwaarde | Waarde |
|---|---|
| Vragen | 154 |
| Geëscaleerd naar een mens | 66 |
| Geëscaleerd (%) | 42,9 |
| Beoordeeld | 0 |
| Nuttig (%) | – |
| Mediane gelijkenis | 0,54 |
Lead-agent
Automatische opvolging van inkomende leads: concepten die een mens beoordeelt, automatische stop als ze niet beoordeeld worden, en het afvoeren van leveranciers en ruis.
| Meetwaarde | Waarde |
|---|---|
| Reeksen | 75 |
| Per status | waiting: 4 · stopped: 63 · replied: 6 · exhausted: 2 |
| Verzonden opvolgingen | 11 |
| Per stopreden | activa: 12 · el lead ya no existe: 2 · not_business: 9 · parada manual por Josep Purroy: el correo del lead rebota (554 5.7.1): 1 · reconciliado: la conversación ya existía en el buzón: 1 · borrador sin revisar durante 4 días: 4 · borrador sin revisar durante 7 días: 1 · proveedor haciendo outreach: fuera del pipeline comercial: 4 · clasificado como «Otro»: no se contacta: 18 · borrador sin revisar durante 6 días: 1 · ya le contestaron a mano desde josep@kiwop.com: 1 · clasificado como «Proveedor»: no se contacta: 19 · particular que quiere formarse: con el correo del curso basta: 1 · clasificado como «Prácticas»: no se contacta: 1 |
Kosten van AI
Metering per aanroep van alles wat door de AI-gateway van Nexo gaat. We scheiden wat via API gefactureerd wordt van wat via abonnementen loopt (gewaardeerd tegen API-prijzen om te kunnen vergelijken, maar niet per token betaald).
| Meetwaarde | Waarde |
|---|---|
| Aanroepen | 11.500 |
| Invoertokens | 564.418.480 |
| Uitvoertokens | 10.685.590 |
| Via API gefactureerd (€) | 761,81 |
| Via abonnement, API-equivalent (€) | 1.736,09 |
| Per aanbieder | openai: 1.008 · anthropic: 10.492 |
| Verschillende modellen | 13 |
| Mediane latentie (ms) | 12.136 |
| Cache-lezingen (%) | 0 |
| Functie | Aanroepen | Invoertokens | Uitvoertokens | Kosten (€) |
|---|---|---|---|---|
| Proactieve agenten | 6.307 | 324.460.628 | 8.697.397 | 1.524,84 |
| Chat | 2.275 | 98.426.113 | 489.634 | 419,55 |
| E-mailbewaker | 1.605 | 78.452.290 | 512.331 | 240,29 |
| E-mailclassificeerder | 788 | 31.652.077 | 432.698 | 172,74 |
| Projectchat | 171 | 15.614.418 | 220.955 | 55,18 |
| Uitgaande e-mail | 246 | 10.067.224 | 88.497 | 52,23 |
| Academy | 77 | 4.324.947 | 117.371 | 24,98 |
| Nieuwsbrief | 15 | 758.602 | 82.193 | 5,85 |
| SEO-content | 13 | 561.325 | 42.078 | 1,64 |
| CRO | 2 | 100.856 | 2.436 | 0,57 |
| operations_slack_audio | 1 | 0 | 0 | 0,03 |
En het andere boek: de CLI-sessies op de server (de autonome worker, de relay en de platformbinary), gemeten uit de transcripten en gewaardeerd tegen lijstprijs.
| Herkomst | Sessies | Beurten | Lijstkosten ($) |
|---|---|---|---|
| Platformbinary | 5.362 | 10.618 | 1.168,64 |
| Autonome worker | 549 | 6.154 | 1.059 |
| Claude-relay | 2.620 | 3.561 | 1.032,92 |
| Brein-relay | 1.195 | 2.371 | 22,89 |
| Niet geclassificeerd | 7 | 10 | 0,16 |
| Total | 9.733 | 22.714 | 3.283,61 |
De crons die alles dragen
Alles hierboven draait op geplande taken. Dit is hun volledige geschiedenis in het venster: hoeveel, hoeveel bewust overgeslagen en hoeveel mislukt.
| Meetwaarde | Waarde |
|---|---|
| Runs | 259.134 |
| Verschillende geplande taken | 256 |
| Per resultaat | skipped: 17.519 · failed: 47 · running: 1 · ok: 241.567 |
| Mislukt (%) | 0,02 |
| Mediane duur (ms) | 1.872 |
Waarom we dit publiceren
- Omdat bijna alles wat over agenten in productie te lezen is, beloftes zijn. Dit zijn tellers van een platform dat al maanden een echt bureau draait, met zijn fouten en verwerpingen.
- Omdat het menselijke ondertekeningspercentage het cijfer is dat het meest telt en het minst wordt gepubliceerd: hoeveel voorstellen van een agent de persoon die ze leest overleven.
- Omdat de echte kosten (twee boeken: API en abonnement) bepalen of een agent loont, en bijna niemand ze laat zien.
Methode
- Eén alleen-lezen SQL-query op de database van Nexo, volledig gepubliceerd. Hij draait elk kwartaal over een venster van 90 dagen en levert alleen aggregaten.
- Niets identificeerbaars: geen klanten, geen projecten, geen teksten, geen id’s. Verdelingen en medianen.
- De data komt van één bedrijf (Kiwop) en één platform (Nexo). Het is geen marktsteekproef; het is één volledige echte case.
- De definities (wat een run is, wat een ondertekening is, wat een opgeleverde PR is) staan in de query en in de Labs-documentatie.
Beperkingen
- Het venster overspant wijzigingen van het platform zelf: nieuwe agenten, correcties van de cacheprijs, delegatieregels. Een sprong tussen kwartalen kan een verandering van ons zijn, niet van de wereld.
- Abonnementskosten worden tegen API-prijzen gewaardeerd om te vergelijken; het is geen betaald geld.
- Niet-ondertekende opmerkingen omvatten verworpen en nog wachtende: we maken geen onderscheid.
- De duur van een run omvat het wachten op de API.
Open data
Citeren
Kiwop Labs (2026-10). AI-agenten in productie: geaggregeerde telemetrie uit Nexo. https://www.kiwop.com/nl/labs/ai-agenten-in-productie
Data onder CC BY 4.0. Query en methode open.
Laten we praten.
Technisch intakegesprek
AI, beveiliging en prestaties. Diagnose met gefaseerd voorstel.
- NDA beschikbaar
- Antwoord <24u
- Gefaseerd voorstel
Je eerste gesprek is met een Solutions Architect, niet met een verkoper.
Praat met een architect