Zum Inhalt springen

Nur-Lesen-Fassung: Das Forschungsinformationssystem (FIS) ist aus Sicherheitsgründen vorübergehend durch diese Nur-Lesen-Fassung ersetzt. Alle öffentlichen Inhalte und Volltexte sind weiterhin abrufbar; Anmeldung, Bearbeitung, Einreichung und Statistiken stehen nicht zur Verfügung. Bei Fragen: fis@uni-bamberg.de

Start › Publikationen › Actor Identification in Discourse : A Challenge for LLMs?

Publikation

Actor Identification in Discourse : A Challenge for LLMs?

Barić, Ana; Padó, Sebastian; Papay, Sean (2024): Actor Identification in Discourse : A Challenge for LLMs?, in: Michael Strube, Chloe Braud, Christian Hardmeier, u. a. (Hrsg.), Proceedings of the 5th Workshop on Computational Approaches to Discourse (CODI 2024), Association for Computational Linguistics, S. 64–70, doi: 10.18653/v1/2024.codi-1.6.

Details

Fakultät/Lehrstuhl
Autorin(nen)/Autor(en)
Barić, Ana
Padó, Sebastian
Titel des Sammelwerks
Proceedings of the 5th Workshop on Computational Approaches to Discourse (CODI 2024)
Herausgeberin(nen)/Herausgeber des Sammelwerks
Strube, Michael
Braud, Chloe
Hardmeier, Christian
Li, Junyi Jessy
Loaiciga, Sharid
Zeldes, Amir
Li, Chuyuan
Konferenz
5th Workshop on Computational Approaches to Discourse (CODI 2024), St Julian’s, Malta
Verlagsangabe
Association for Computational Linguistics
Erscheinungsjahr
2024
Sprache(n)
Englisch
DOI
URL
Abstract

The identification of political actors who put forward claims in public debate is a crucial step in the construction of discourse networks, which are helpful to analyze societal debates. Actor identification is, however, rather challenging: Often, the locally mentioned speaker of a claim is only a pronoun (“He proposed that [claim]”), so recovering the canonical actor name requires discourse understanding. We compare a traditional pipeline of dedicated NLP components (similar to those applied to the related task of coreference) with a LLM, which appears a good match for this generation task. Evaluating on a corpus of German actors in newspaper reports, we find surprisingly that the LLM performs worse. Further analysis reveals that the LLM is very good at identifying the right reference, but struggles to generate the correct canonical form. This points to an underlying issue in LLMs with controlling generated output. Indeed, a hybrid model combining the LLM with a classifier to normalize its output substantially outperforms both initial models.

Freie Schlagwort(e)
Actor Identification
Peer Reviewed
ja
Internationale Verbreitung
ja
Open-Access-Zeitschrift
ja
Dokumenttyp
Konferenzveröffentlichung
URI
Datum der Freischaltung
28.05.2026

Permalink: https://fis.uni-bamberg.de/handle/uniba/115293 · Daten als JSON · Zitieren: BibTeX · RIS

Datenstand: 15.11.2026

Eingeschränkter Lesezugriff: Anmeldung, Bearbeitung und Einreichung sind vorübergehend deaktiviert.