Skip to main content
A/B-testning besvarer spørgsmålet “er den nye prompt faktisk bedre?” med data i stedet for mavefornemmelser: indgående opkald fordeles mellem agentens varianter, hvert opkald vurderes som normalt, og du sammenligner succesrater pr. variant. Der er to visninger:
  • Pr. agent — tests konfigureres og justeres i hver agents builder på fanen A/B (/dashboard/agents/<id>?tab=variants). Her opretter du varianter og slår testen til.
  • Oversigt på tværs af agenter — siden Eksperimenter (/dashboard/experiments, under Kvalitet og test) samler hver agents test i én tabel.

Opsæt en test

På siden Eksperimenter skal du klikke på Opsæt en A/B-test og vælge en agent — du lander på agentens A/B-fane, hvor du opretter variantkonfigurationerne (én er markeret som kontrol) og aktiverer split-testning. Se Byg en agent for selve builderen.

Læs oversigten

For hver agent med en test viser tabellen Eksperimenter:
  • Status — Aktiv (split-testning slået til) eller Sat på pause.
  • Varianter — hver variant som en chip med den markerede kontrol.
  • Førende — varianten med den bedste succesrate indtil videre samt dens procentdel. Indtil varianterne har vurderede opkald, står der Ikke nok data endnu — udråb ikke en vinder på baggrund af en håndfuld opkald.
  • Opkald — samlet antal opkald på tværs af testens varianter.
Agenter uden en test er angivet nedenunder som genveje med ét klik til at starte en. Når du klikker på en række, kommer du til den pågældende agents A/B-fane, hvor du kan justere eller afslutte testen.
Hvilken variant der håndterede et opkald, registreres på selve opkaldet, så du kan filtrere og stikprøvekontrollere transskriptionerne for hver side i opkaldshistorikken.
Brug helst denne indbyggede funktion frem for selv at bygge A/B-tildeling i en dynamisk konfigurationswebhook — du får tildeling, statistik pr. variant og vurdering uden ekstra opsætning.

Næste trin

Byg en agent

Opret varianter på agentens A/B-fane.

Simuleringer

Test før lancering med AI-opkaldere, før rigtig trafik afgør det.