Skip to main content
A/B-testen beantwoordt de vraag “is de nieuwe prompt echt beter?” met data in plaats van onderbuikgevoel: inkomende oproepen worden verdeeld over varianten van de agent, elke oproep wordt zoals gebruikelijk beoordeeld en je vergelijkt de succespercentages per variant. Er zijn twee plekken:
  • Per agent — tests worden geconfigureerd en afgestemd in de builder van elke agent, op het tabblad A/B (/dashboard/agents/<id>?tab=variants). Daar maak je varianten en schakel je de test in.
  • Overzicht voor alle agents — de pagina Experiments (/dashboard/experiments, onder Quality & Testing) bundelt de test van elke agent in één tabel.

Een test instellen

Klik op de pagina Experiments op Een A/B-test instellen en kies een agent — je komt op het A/B-tabblad van die agent, waar je de variantconfiguraties maakt (waarvan er één is gemarkeerd als controle) en split-testing inschakelt. Zie Een agent bouwen voor de builder zelf.

Het overzicht lezen

Voor elke agent met een test toont de tabel Experiments:
  • Status — Actief (split-testing ingeschakeld) of Gepauzeerd.
  • Varianten — elke variant als chip, met vermelding van de controle.
  • Leidend — de variant met tot nu toe het beste succespercentage, met het percentage. Tot varianten beoordeelde oproepen hebben, staat hier Nog niet genoeg gegevens — wijs geen winnaar aan op basis van een handvol oproepen.
  • Oproepen — het totale aantal oproepen voor de varianten van de test.
Agents zonder test worden daaronder weergegeven als opties die je met één klik kunt gebruiken om een test te starten. Als je op een rij klikt, ga je naar het A/B-tabblad van die agent om de test af te stemmen of af te ronden.
Welke variant een oproep heeft afgehandeld, wordt bij de oproep zelf vastgelegd. Je kunt dus de transcripties van beide kanten filteren en steekproefsgewijs controleren in de oproepgeschiedenis.
Gebruik bij voorkeur deze ingebouwde functie in plaats van zelf A/B-toewijzing te maken in een webhook voor dynamische configuratie — je krijgt toewijzing, statistieken per variant en beoordeling zonder extra werk.

Volgende stappen

Een agent bouwen

Maak varianten op het A/B-tabblad van de agent.

Simulaties

Test vóór de release met AI-bellers, voordat echt verkeer beslist.