Skip to Main content Skip to Navigation
Conference papers

Abstraction ou hallucination ? État des lieux et évaluation du risque pour les modèles de génération de résumés automatiques de type séquence-à-séquence

Résumé : La génération de texte a récemment connu un très fort intérêt au vu des avancées notables dans le domaine des modèles de langage neuronaux. Malgré ces avancées, cette tâche reste difficile quand il s’agit d’un résumé automatique de texte par abstraction. Certains systèmes de résumés génèrent des textes qui ne sont pas forcément fidèles au document source. C’est sur cette thématique que porte notre étude. Nous présentons une typologie d’erreurs pour les résumés automatique et ainsi qu’une caractérisation du phénomène de l’abstraction pour les résumés de référence afin de mieux comprendre l’ampleur de ces différents phénomènes sur les entités nommées. Nous proposons également une mesure d’évaluation du risque d’erreur lorsqu’un système tente de faire des abstractions sur les entités nommées d’un document.
Document type :
Conference papers
Complete list of metadata

https://hal.archives-ouvertes.fr/hal-03701510
Contributor : Yannick Parmentier Connect in order to contact the contributor
Submitted on : Friday, June 24, 2022 - 4:42:28 PM
Last modification on : Thursday, July 7, 2022 - 5:41:53 AM
Long-term archiving on: : Sunday, September 25, 2022 - 9:37:46 PM

File

6760.pdf
Publisher files allowed on an open archive

Identifiers

  • HAL Id : hal-03701510, version 1

Citation

Eunice Akani, Benoit Favre, Frederic Bechet. Abstraction ou hallucination ? État des lieux et évaluation du risque pour les modèles de génération de résumés automatiques de type séquence-à-séquence. Traitement Automatique des Langues Naturelles (TALN 2022), Jun 2022, Avignon, France. pp.2-11. ⟨hal-03701510⟩

Share

Metrics

Record views

116

Files downloads

11