Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.
Rincian hasil tes di Test Workbench
Hasil tes menunjukkan detail set tes, maksud yang digunakan, dan slot yang digunakan. Ini juga menyediakan rincian input set tes keseluruhan termasuk hasil keseluruhan, hasil percakapan, maksud, dan hasil slot.
Hasil tes terdiri dari semua informasi terkait pengujian seperti:
-
Metadata detail pengujian
-
Hasil keseluruhan
-
Hasil percakapan
-
Maksud dan hasil slot
-
Hasil terperinci
Tab hasil keseluruhan:
Rincian input set uji - Bagan ini menunjukkan rincian jumlah percakapan dan ucapan input tunggal dalam set pengujian.
Rincian input tunggal — Menampilkan dua bagan yang menyertakan percakapan ujung ke ujung dan transkripsi ucapan. Jumlah input yang dilewati dan gagal ditunjukkan pada setiap bagan. Catatan: Bagan transkripsi ucapan hanya akan terlihat untuk set uji audio.
Rincian percakapan — Menampilkan dua bagan yang menyertakan percakapan ujung ke ujung dan transkripsi ucapan. Jumlah input yang dilewati dan gagal ditunjukkan pada setiap bagan. Catatan: Bagan transkripsi ucapan hanya akan terlihat untuk set uji audio.
Tab hasil percakapan:
Tingkat kelul usan percakapan — Tabel tingkat kelulusan percakapan digunakan untuk melihat maksud dan slot mana yang digunakan dalam setiap percakapan di set tes. Anda dapat memvisualisasikan di mana percakapan gagal dengan meninjau maksud atau slot mana yang gagal, bersama dengan persentase kelulusan dari setiap maksud dan slot.
Metrik kegagalan niat percakapan — Metrik ini menunjukkan 5 maksud berkinerja terburuk teratas dalam set pengujian. Panel ini menunjukkan bagan berapa persen atau jumlah maksud yang berhasil atau gagal berdasarkan log percakapan atau transkripsi bot. Niat yang sukses tidak berarti bahwa seluruh percakapan berhasil. Metrik ini hanya berlaku untuk nilai maksud, terlepas dari maksud mana yang datang sebelum atau sesudahnya.
Metrik kegagalan slot percakapan — Metrik ini menunjukkan 5 slot berkinerja terburuk di set pengujian. Menunjukkan tingkat keberhasilan untuk setiap slot dalam maksud. Grafik batang menunjukkan transkripsi ucapan dan percakapan ujung ke ujung untuk setiap slot dalam maksud.
Tab hasil maksud dan slot:
Metrik pengenalan maksud — Menampilkan tabel berapa banyak maksud yang berhasil dikenali. Menampilkan tingkat kelulusan transkripsi ucapan dan percakapan ujung ke ujung.
Metrik resolusi slot — Menunjukkan maksud dan slot secara terpisah, dan tingkat keberhasilan dan kegagalan setiap slot untuk setiap maksud yang digunakan dalam percakapan atau input tunggal. Menampilkan tingkat kelulusan transkripsi ucapan dan percakapan ujung ke ujung.
Tab hasil terperinci:
Hasil terperinci — Menampilkan tabel terperinci pada log percakapan dengan ucapan Pengguna dan Agen dan output yang diharapkan dan transkripsi yang diharapkan untuk setiap slot. Anda dapat mengunduh laporan ini dengan memilih tombol Unduh.
Tabel berikut mencantumkan pesan kesalahan kegagalan hasil dengan skenario.
| Skenario | Pesan kesalahan | Tindakan |
|---|---|---|
| Ketidakcocokan niat | Ni BookFlight at yang diharapkan tetapi itu adalah BookHotel niat. | Lewati putaran lain dalam percakapan |
| Ketidakcocokan Elicitation Slot | Slot DepartureDate yang diharapkan akan dimunculkan tetapi itu adalah CabinType. | Lewati putaran lain dalam percakapan |
| Ketidakcocokan nilai slot | Ketidakcocokan antara nilai slot yang diharapkan dan aktual. | Lanjutkan dengan putaran lain dalam percakapan |
| Back-to-back Prompt agen tidak ada | Diharapkan bot untuk mengembalikan prompt agen pada giliran ini tetapi tidak diterima. | Lewati putaran lain dalam percakapan |
| Ketidakcocokan Transkripsi | Transkripsi yang diharapkan tidak cocok dengan transkripsi aktual. | Lanjutkan dengan putaran lain dalam percakapan |
| Slot opsional tidak muncul | Diharapkan untuk mendapatkan slot CabinType di giliran berikutnya, namun niat saat ini terpenuhi sebelum itu. | Lewati putaran lain dalam percakapan |
| Slot tidak dikenali | Slot DepartureDate yang diharapkan tidak dikenali pada giliran ini. | Lewati putaran lain dalam percakapan |
| Prompt agen back-to-back ekstra | Diharapkan giliran pengguna tetapi itu adalah prompt agen | Lewati putaran lain dalam percakapan |
