/dashboard/validation) kullanın. Kümeyi çalıştırmak ve çalışma geçmişini incelemek için
tek tek ajanların Doğrulama sekmesini kullanın.
Arama geçmişinden örnek ekleme
1
Örnek ekle'yi seçin
Örneğin davranışını doğrulaması gereken ajanı seçin. Çalışma alanı,
bu ajan için en fazla 25 yakın tarihli simülasyon dışı aramayı gösterir.
2
Bir arama ve ajan dönüşü seçin
Transkripti okuyun, korumak istediğiniz ajan dönüşünün üzerine gelin ve
kontrol listesi eylemini seçin. Bu dönüşe kadarki konuşma ve arayanın
ses aralıkları doğrulama veri kümesine kopyalanır.
3
Beklentiyi gözden geçirin
ThunderPhone doğru davranışın bir açıklamasını taslak olarak oluşturur. Açıklamayı
belirli ve test edilebilir olacak şekilde düzenleyin; isteğe bağlı olarak kabul edilen örnek yanıtı
ve beklenen araç çağrılarını da düzenleyin.
4
Kaydedin veya etkinleştirin
Taslağı kaydet, örneği İnceleme gerekli durumunda bırakır.
Kaydet ve etkinleştir, örneği gelecekteki doğrulama çalıştırmalarına dahil eder.
Örnek türleri ve durumları
Türler, bir örneğin neden var olduğunu açıklar:
Durumlar yaşam döngüsünü kontrol eder:
Veri kümesini görüntüleyin ve iyileştirin
Kuruluş veri kümesini ajan, durum veya tür ölçütüne göre filtreleyin. Bir örnek seçildiğinde şunlar gösterilir:- Sabitlenmiş konuşma bağlamı ve oynatılabilir arayan ses aralıkları.
- Kaynak arama ve özgün yanıt.
- Temel doğruluk beklentisi, kabul edilen konuşmalı yanıt ve araç çağrıları.
- Özgün ve beklenen davranışın yanında en son yeniden oynatma.
- Varsa en son karar ve değerlendirici açıklamaları.
Bir doğrulama kümesi çalıştırın
Ajanın Doğrulama sekmesinden, etkin her örnek üzerinde bir çalıştırma başlatın. Her örnek şu kararlardan birini alır:- Başarılı — yanıt, beklentiyi ve arayan ses kaydını karşılar.
- Uyarı — yanıt kullanılabilir durumdadır ancak bir kontrol belirsizlik tespit etmiştir.
- Başarısız — ses kaydıyla çelişir veya gerekli davranışı yerine getirmez.
- Atlandı — gerekli arayan ses kaydı yüklenemedi; başarı oranı paydasına dahil edilmez.
- Hata — yeniden oynatma veya değerlendirme tamamlanamadı.
Doğrulama kanıtlarıyla yayına alın
Bir ajanın doğrulama örnekleri olduğunda, yayına alma iletişim kutusu en son tamamlanan çalıştırmanın mevcut taslakla eşleşip eşleşmediğini bildirir. Şunları yapabilirsiniz:- Görüntülenen geçme oranı ve regresyon sayısıyla yayına alın.
- Eşleşen bir çalıştırma yoksa önce doğrulamayı çalıştırın.
- Sonuç incelendiyse bilerek yine de yayına alın.
