Dasbor kinerja Agen AI - Amazon Connect

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Dasbor kinerja Agen AI

Anda dapat menggunakan dasbor kinerja Agen AI untuk melihat kinerja Agen AI, dan mendapatkan wawasan di seluruh Agen AI dan dari waktu ke waktu.

Dasbor menyediakan satu tempat untuk melihat kinerja Agen AI agregat. Gunakan dasbor untuk melihat metrik Agen AI Anda seperti jumlah pemanggilan, latensi, dan tingkat keberhasilan.

Aktifkan akses ke dasbor

Pastikan pengguna diberi izin profil keamanan yang sesuai:

Metrik akses - Izin akses atau Dasbor - Izin akses. Untuk informasi tentang perbedaan perilaku, lihatTetapkan izin untuk melihat dasbor dan laporan di Amazon Connect.

Aplikasi agen - Izin Connect Workspace AI Chat Widget: Izin ini diperlukan untuk mengakses dasbor Kinerja Agen AI.

Dasbor tersedia di: Analytics and optimization > Analytics dashboard > AI Agent Performance.

Tentukan tolok ukur “Rentang waktu” dan “Bandingkan dengan”

Gunakan filter Rentang waktu untuk menentukan tanggal dan periode waktu yang ingin Anda lihat data di dasbor.

Secara default, dasbor menampilkan data selama seminggu terakhir. Anda dapat menyesuaikan rentang waktu untuk melihat data dari yang terbaru seperti 15 menit terakhir atau kembali hingga 3 bulan dalam sejarah.

Gunakan Bandingkan untuk memfilter untuk memilih periode waktu untuk membandingkan data Anda saat ini. Ini memungkinkan Anda mengidentifikasi tren dan melacak peningkatan atau masalah dari waktu ke waktu.

Ringkasan kinerja AI swalayan

Bagian ini menunjukkan kesehatan interaksi Layanan Mandiri yang dimulai agen AI Anda. Ini menampilkan metrik kunci berikut untuk periode waktu yang dipilih yang disaring oleh kasus penggunaan 'Layanan mandiri':

  • AI melibatkan kontak:

    Jumlah total kontak yang ditangani di mana agen AI menyelesaikan pertanyaan pelanggan tanpa melibatkan agen manusia.

  • Agen AI aktif:

    Jumlah total agen AI unik, di mana setiap agen diidentifikasi oleh kombinasi unik Nama dan Versi.

  • Tingkat penyelesaian respons:

    Persentase sesi agen AI yang berhasil menanggapi permintaan yang masuk.

  • Tingkat serah terima:

    Persentase kontak layanan mandiri yang ditangani oleh agen AI yang ditandai karena membutuhkan dukungan tambahan termasuk tetapi tidak terbatas pada agen manusia.

  • Rata-rata. Percakapan AI berubah:

    Rata-rata jumlah percakapan berubah di seluruh kontak berkemampuan AI.

Gambar berikut menunjukkan contoh bagan ringkasan kinerja AI swalayan.

Bagan ringkasan kinerja agen AI swalayan.

Ringkasan kinerja bantuan agen AI

Widget ini menunjukkan kesehatan interaksi yang dibantu agen Anda di mana AI memberikan dukungan kepada agen manusia. Ini menampilkan metrik kunci berikut untuk periode waktu yang dipilih yang disaring oleh kasus penggunaan 'Bantuan Agen'.

  • AI melibatkan kontak:

    Jumlah total kontak di mana Agen AI membantu agen manusia dalam menyelesaikan pertanyaan pelanggan.

  • Agen AI aktif:

    Jumlah total agen AI unik, di mana setiap agen diidentifikasi oleh kombinasi unik Nama dan Versi.

  • Tingkat penyelesaian respons:

    Persentase sesi agen AI yang berhasil menanggapi permintaan yang masuk.

  • Tingkat keterlibatan niat proaktif:

    Persentase maksud proaktif yang terdeteksi diklik oleh agen manusia.

  • Rata-rata. Percakapan AI berubah:

    Rata-rata jumlah percakapan berubah di seluruh kontak berkemampuan AI.

  • Rata-rata menangani waktu:

    Waktu penanganan rata-rata untuk kontak tempat Agen AI terlibat

Gambar berikut menunjukkan contoh bagan ringkasan kinerja bantuan agen AI.

Bagan ringkasan kinerja bantuan agen AI.

Agen AI berdasarkan bagan versi

Pada grafik tren skor Evaluasi Anda dapat melihat tren pada interval 15 menit, harian, mingguan atau bulanan, dan melakukan perbandingan dengan periode waktu sebelumnya dan tolok ukur sumber daya. Interval yang tersedia tergantung pada pilihan rentang waktu. Misalnya, untuk Rentang Waktu mingguan, Anda dapat melihat tren pada interval harian dan mingguan.

Selain filter halaman, Anda juga dapat menambahkan filter ke bagan untuk formulir evaluasi dan sumber evaluasi.

Gambar berikut menunjukkan contoh grafik tren skor evaluasi.

Agen AI berdasarkan bagan versi.

Agen AI dengan tingkat keberhasilan pemanggilan

Bagan tingkat keberhasilan agen AI dengan pemanggilan menampilkan tingkat keberhasilan pemanggilan untuk setiap agen AI. Anda dapat mengonfigurasi widget ini lebih lanjut dengan memfilter agen AI tertentu, jenis agen AI, kasus penggunaan AI, atau dimensi lain langsung dari bagan ini.

Gambar berikut menunjukkan contoh agen AI dengan bagan tingkat keberhasilan pemanggilan.

Agen AI dengan grafik tingkat keberhasilan pemanggilan.

AI meminta berdasarkan versi

Tabel ini memberikan tampilan penelusuran kinerja prompt AI. Anda dapat memperluas jenis agen AI dan baris tipe prompt untuk menelusuri ke versi prompt tertentu. Untuk melihat bagaimana setiap versi berkontribusi pada performa tipe prompt keseluruhan, lihat metrik individual untuk setiap baris versi prompt.

Tabel menampilkan metrik kinerja pada tiga tingkatan:

  • Tingkat jenis agen AI:

    Metrik agregat di semua permintaan dan versi untuk jenis agen AI

  • Tingkat tipe prompt AI:

    Metrik agregat di semua versi tipe prompt AI tertentu

  • Tingkat versi prompt AI:

    Metrik kinerja individual untuk setiap versi prompt AI

Metrik yang ditampilkan:

  • Jumlah pemanggilan prompt AI:

    Jumlah total kali versi prompt AI dipanggil

  • Tingkat keberhasilan pemanggilan cepat AI:

    Persentase pemanggilan prompt AI yang berhasil dieksekusi

  • Rata-rata. Latensi pemanggilan prompt AI:

    Latensi pemanggilan rata-rata dalam milidetik untuk versi prompt AI

Selain menggunakan filter halaman, Anda dapat menambahkan filter ke tabel untuk agen AI tertentu, petunjuk AI, rentang waktu, atau dimensi lainnya.

Gambar berikut menunjukkan contoh AI yang diminta oleh bagan versi.

AI meminta berdasarkan tabel tingkat keberhasilan versi.