Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.
Détails des résultats des tests dans Test Workbench
Les résultats des tests indiquent les détails du set de test, les intentions utilisées et les emplacements utilisés. Il fournit également la ventilation globale des entrées de l'ensemble de tests, y compris les résultats globaux, les résultats des conversations, l'intention et les résultats des créneaux.
Les résultats des tests comprennent toutes les informations relatives aux tests, telles que :
-
Métadonnées des détails du test
-
Résultats globaux
-
Résultats de la conversation
-
Intention et résultats des machines à sous
-
Des résultats détaillés
Onglet des résultats généraux :
Répartition des entrées de l'ensemble de test — Ce graphique montre la répartition du nombre de conversations et des énoncés à entrée unique dans l'ensemble de tests.
Répartition en une seule entrée : affiche deux graphiques qui incluent les conversations de bout en bout et les transcriptions vocales. Le nombre d'entrées réussies et échouées est indiqué sur chaque graphique. Remarque : le tableau de transcription vocale ne sera visible que pour le kit de test audio.
Répartition des conversations : affiche deux graphiques qui incluent les conversations de bout en bout et les transcriptions vocales. Le nombre d'entrées réussies et échouées est indiqué sur chaque graphique. Remarque : le tableau de transcription vocale ne sera visible que pour le kit de test audio.
Onglet Résultats de la conversation :
Taux de réussite des conversations — Le tableau des taux de réussite des conversations est utilisé pour voir quelles intentions et quels créneaux sont utilisés dans chaque conversation de la série de tests. Vous pouvez visualiser où la conversation a échoué en vérifiant quelle intention ou quel créneau a échoué, ainsi que le pourcentage de réussite de chaque intention et de chaque créneau.
Indicateurs d'échec des intentions de conversation : cet indicateur indique les 5 intentions les moins performantes de l'ensemble de tests. Ce panneau affiche un graphique indiquant le pourcentage ou le nombre d'intentions réussies ou échouées en fonction des journaux de conversation ou de la transcription du bot. Une intention réussie ne signifie pas que l'ensemble de la conversation a été couronné de succès. Ces mesures ne s'appliquent qu'à la valeur des intentions, quelle que soit l'intention qui est survenue avant ou après.
Indicateurs d'échec des créneaux de conversation : cet indicateur indique les 5 créneaux les moins performants de l'ensemble de test. Indiqué le taux de réussite pour chaque case de l'intention. Le graphique à barres montre à la fois la transcription vocale et les conversations de bout en bout pour chaque créneau de l'intention.
Onglet Intention et résultats des machines à sous :
Indicateurs de reconnaissance des intentions : affiche un tableau indiquant le nombre d'intentions qui ont été reconnues avec succès. Affiche le taux de réussite de la transcription vocale et des conversations de bout en bout.
Métriques de résolution des créneaux : affiche les intentions et les créneaux séparément, ainsi que le taux de réussite et d'échec de chaque créneau pour chaque intention utilisée dans la conversation ou dans une entrée unique. Affiche le taux de réussite de la transcription vocale et des conversations de bout en bout.
Onglet des résultats détaillés :
Résultats détaillés : affiche un tableau détaillé dans le journal des conversations avec les énoncés des utilisateurs et des agents, ainsi que le résultat attendu et la transcription attendue pour chaque créneau. Vous pouvez télécharger ce rapport en cliquant sur le bouton Télécharger.
Le tableau suivant répertorie les messages d'erreur d'échec des résultats avec des scénarios.
| Scénario | Message d’erreur | Action |
|---|---|---|
| Incompatibilité entre les intentions | BookFlight L'intention était attendue, mais c'était BookHotel l'intention. | Ignorez les autres étapes de la conversation |
| Incompatibilité entre les machines à sous et entre les machines à sous | Le créneau DepartureDate devait être obtenu, mais il s'agissait de CabinType. | Ignorez les autres étapes de la conversation |
| Incompatibilité entre les valeurs des emplacements | Incompatibilité entre la valeur de slot attendue et la valeur réelle de l'emplacement. | Poursuivre les autres tournants des conversations |
| Back-to-back l'invite de l'agent est manquante | Je m'attendais à ce que le bot renvoie une invite d'agent à ce tour, mais celle-ci n'a pas été reçue. | Ignorez les autres étapes de la conversation |
| Incompatibilité de transcription | La transcription attendue ne correspondait pas à la transcription réelle. | Poursuivre les autres tournants des conversations |
| Emplacement optionnel non obtenu | Cela devrait permettre d'obtenir une place CabinType au prochain tour, mais l'intention actuelle s'est concrétisée avant cela. | Ignorez les autres étapes de la conversation |
| Slot non reconnu | Le créneau DepartureDate attendu n'a pas été reconnu ce tour. | Ignorez les autres étapes de la conversation |
| Invite supplémentaire pour les agents | Je m'attendais à ce que l'utilisateur tourne, mais l'agent l'a demandé | Ignorez les autres étapes de la conversation |
