Zum Inhalt springen

Nur-Lesen-Fassung: Das Forschungsinformationssystem (FIS) ist aus Sicherheitsgründen vorübergehend durch diese Nur-Lesen-Fassung ersetzt. Alle öffentlichen Inhalte und Volltexte sind weiterhin abrufbar; Anmeldung, Bearbeitung, Einreichung und Statistiken stehen nicht zur Verfügung. Bei Fragen: fis@uni-bamberg.de

Start › Publikationen › iPrOp : Interactive Prompt Optimization for Large Language Models with a Human in the Loop

Publikation

iPrOp : Interactive Prompt Optimization for Large Language Models with a Human in the Loop

Li, Jiahui; Klinger, Roman (2025): iPrOp : Interactive Prompt Optimization for Large Language Models with a Human in the Loop, in: Jin Zhao, Mingyang Wang, Zhu Liu, u. a. (Hrsg.), Proceedings of the 63rd Annual Meeting of the Association for Computational Linguistics, Association for Computational Linguistics, S. 276–285, doi: 10.18653/v1/2025.acl-srw.18.

Details

Fakultät/Lehrstuhl
Autorin(nen)/Autor(en)
Titel des Sammelwerks
Proceedings of the 63rd Annual Meeting of the Association for Computational Linguistics
Band/Titel des Bands
4: Student Research Workshop
Herausgeberin(nen)/Herausgeber des Sammelwerks
Zhao, Jin
Wang, Mingyang
Liu, Zhu
Konferenz
63rd Annual Meeting of the Association for Computational Linguistics
Verlagsangabe
Association for Computational Linguistics
Erscheinungsjahr
2025
ISBN
979-8-89176-254-1
Sprache(n)
Englisch
DOI
Abstract

Prompt engineering has made significant contributions to the era of large language models, yet its effectiveness depends on the skills of a prompt author. This paper introduces iPrOp, a novel interactive prompt optimization approach, to bridge manual prompt engineering and automatic prompt optimization while offering users the flexibility to assess evolving prompts. We aim to provide users with task-specific guidance to enhance human engagement in the optimization process, which is structured through prompt variations, informative instances, predictions generated by large language models along with their corresponding explanations, and relevant performance metrics. This approach empowers users to choose and further refine the prompts based on their individual preferences and needs. It can not only assist non-technical domain experts in generating optimal prompts tailored to their specific tasks or domains, but also enable to study the intrinsic parameters that influence the performance of prompt optimization. The evaluation shows that our approach has the capability to generate improved prompts, leading to enhanced task performance.

Freie Schlagwort(e)
-
Peer Reviewed
ja
Internationale Verbreitung
ja
Open-Access-Zeitschrift
ja
Dokumenttyp
Konferenzveröffentlichung
URI
Datum der Freischaltung
07.08.2025
Projekt(e)

Permalink: https://fis.uni-bamberg.de/handle/uniba/109548 · Daten als JSON · Zitieren: BibTeX · RIS

Datenstand: 16.11.2026

Eingeschränkter Lesezugriff: Anmeldung, Bearbeitung und Einreichung sind vorübergehend deaktiviert.