Une métrique d'évaluation pour la génération textuelle

Nicolas Garneau (nicolas (point) garneau <at> ift (point) ulaval (point) ca)

Université Laval

Le 10 mars 2021 à 11 h 30

Réunion Zoom (voir http://rali.iro.umontreal.ca/rali/seminaire-virtuel)


Nous présentons un nouvel ensemble de données Data-to-Text francophone pour la génération automatique de contenu textuel dans le domaine juridique, Plum2Text. Ce nouvel ensemble de données a des entrées et sorties uniques en soi ; du côté de la table, les valeurs contiennent de longs énoncés textuels, et du côté du texte, on retrouve souvent une paraphrase des valeurs du tableau. Nous décrivons la manière dont nous avons conçu les annotations tables-textes en introduisant un outil d'annotation et une méthodologie spécifique à la tâche de génération de langage naturel "Data-to-Text". Nous présentons ensuite une nouvelle métrique d'évaluation utilisant la recherche d'informations (DEIR), qui est mieux adaptée que les métriques introduites précédemment lorsque les tables contiennent du texte pouvant être associé à de multiples références.

Enregistrement Zoom : https://drive.google.com/file/d/1qWsEAxRreEkMtSJtJt9T2wmbNGTaeOYv/view?usp=sharing


Pour recevoir les annonces hebdomadaires par courriel, visitez http://rali.iro.umontreal.ca/rali/?q=fr/node/1631

Liste des autres séminaires