Prompt Orchestratie Markup Taal

Samenvatting

Grote Taalmodellen (LLMs) vereisen geavanceerde prompting, maar huidige praktijken kampen met uitdagingen op het gebied van structuur, gegevensintegratie, gevoeligheid voor opmaak en tooling. Bestaande methoden bieden geen uitgebreide oplossingen voor het organiseren van complexe prompts die diverse gegevenstypen (documenten, tabellen, afbeeldingen) omvatten of het systematisch beheren van presentatievariaties. Om deze lacunes aan te pakken, introduceren we POML (Prompt Orchestration Markup Language). POML maakt gebruik van componentgebaseerde markup voor logische structuur (rollen, taken, voorbeelden), gespecialiseerde tags voor naadloze gegevensintegratie, en een CSS-achtig opmaaksysteem om inhoud te ontkoppelen van presentatie, waardoor de gevoeligheid voor opmaak wordt verminderd. Het omvat templating voor dynamische prompts en een uitgebreide ontwikkelaarstoolkit (IDE-ondersteuning, SDK's) om versiebeheer en samenwerking te verbeteren. We valideren POML via twee casestudies die de impact ervan aantonen op complexe applicatie-integratie (PomLink) en nauwkeurigheidsprestaties (TableQA), evenals een gebruikersstudie die de effectiviteit ervan beoordeelt in real-world ontwikkelingsscenario's.

English

Large Language Models (LLMs) require sophisticated prompting, yet current practices face challenges in structure, data integration, format sensitivity, and tooling. Existing methods lack comprehensive solutions for organizing complex prompts involving diverse data types (documents, tables, images) or managing presentation variations systematically. To address these gaps, we introduce POML (Prompt Orchestration Markup Language). POML employs component-based markup for logical structure (roles, tasks, examples), specialized tags for seamless data integration, and a CSS-like styling system to decouple content from presentation, reducing formatting sensitivity. It includes templating for dynamic prompts and a comprehensive developer toolkit (IDE support, SDKs) to improve version control and collaboration. We validate POML through two case studies demonstrating its impact on complex application integration (PomLink) and accuracy performance (TableQA), as well as a user study assessing its effectiveness in real-world development scenarios.