Test listesinde bilinen cevaplar, eksik bilgiler ve yanlış önkabuller birlikte yer alabilir. Amaç asistanı şaşırtmak için oyun kurmak değil, sınırlarını işe başlamadan görmek. Sonuçları kaydetmek değişiklikleri karşılaştırmayı sağlar.
Bir mutfak senaryosu
Onaylı menüde olmayan bir ürünün içeriğini sorduğunu düşün. İyi bir sonuç, bir içerik uydurmak yerine kayıtta bulunmadığını söylemesi olabilir. Bu davranış da başarı ölçütü olarak yazılmalıdır.
Sınırı nerede?
Bir kez doğru cevap verilmesi kalıcı güvenilirlik kanıtı değildir. Sistem veya belgeler değiştikçe aynı testler tekrar uygulanmalıdır.
Küçük bir başlangıç
Yirmi gerçekçi soru hazırla ve beklenen davranışı önceden yaz. Yanıtı yalnızca doğru veya yanlış diye değil, kaynak kullanımı ve belirsizliği belirtme açısından da değerlendir.
