Defining And Detecting Inconsistent System Behavior in Task-oriented Dialogues ; Définition et détection des incohérences du système dans les dialogues orientés tâche.
In: Actes de la 28e Conférence sur le Traitement Automatique des Langues Naturelles. Volume 1 : conférence principale ; Traitement Automatique des Langues Naturelles ; https://hal.science/hal-03265892 ; Traitement Automatique des Langues Naturelles, 2021, Lille, France. pp.142-152, 2021
Online
Konferenz
Zugriff:
International audience ; Définition et détection des incohérences du système dans les dialogues orientés tâche. Nous présentons des expériences sur la détection automatique des comportements incohérents des systèmes de dialogues orientés tâche à partir du contexte. Nous enrichissons les données bAbI/DSTC2 (Bordes et al., 2017) avec une annotation automatique des incohérences de dialogue, et nous démontrons que les incohérences sont en corrélation avec les dialogues ratés. Nous supposons que l’utilisation d’un historique de dialogue limité et la prédiction du prochain tour de l’utilisateur peuvent améliorer la classification des incohérences. Si les deux hypothèses sont confirmées pour un modèle de dialogue basé sur les réseaux de mémoire, elles ne le sont pas pour un entraînement basé sur le modèle de langage GPT-2, qui bénéficie le plus de l’utilisation de l’historique complet du dialogue et obtient un score de précision de 0,99.
Titel: |
Defining And Detecting Inconsistent System Behavior in Task-oriented Dialogues ; Définition et détection des incohérences du système dans les dialogues orientés tâche.
|
---|---|
Autor/in / Beteiligte Person: | Schaub, Léon-Paul ; Hudecek, Vojtech ; Stancl, Daniel ; Dusek, Ondrej ; Paroubek, Patrick ; Laboratoire Interdisciplinaire des Sciences du Numérique (LISN) ; Institut National de Recherche en Informatique et en Automatique (Inria)-CentraleSupélec-Université Paris-Saclay-Centre National de la Recherche Scientifique (CNRS) ; UFAL-CUNI ; CUNI ; UFAL -, CUNI ; Denis, Pascal ; Grabar, Natalia ; Fraisse, Amel ; Cardon, Rémi ; Jacquemin, Bernard ; Kergosien, Eric ; Balvet, Antonio |
Link: | |
Zeitschrift: | Actes de la 28e Conférence sur le Traitement Automatique des Langues Naturelles. Volume 1 : conférence principale ; Traitement Automatique des Langues Naturelles ; https://hal.science/hal-03265892 ; Traitement Automatique des Langues Naturelles, 2021, Lille, France. pp.142-152, 2021 |
Veröffentlichung: | HAL CCSD ; ATALA, 2021 |
Medientyp: | Konferenz |
Schlagwort: |
|
Sonstiges: |
|