Linguagem de Marcação para Orquestração de Prompts

Resumo

Modelos de Linguagem de Grande Escala (LLMs) exigem técnicas sofisticadas de prompt, mas as práticas atuais enfrentam desafios em estrutura, integração de dados, sensibilidade a formatos e ferramentas. Os métodos existentes carecem de soluções abrangentes para organizar prompts complexos que envolvem diversos tipos de dados (documentos, tabelas, imagens) ou para gerenciar variações de apresentação de forma sistemática. Para abordar essas lacunas, introduzimos o POML (Prompt Orchestration Markup Language). O POML emprega marcação baseada em componentes para estrutura lógica (papéis, tarefas, exemplos), tags especializadas para integração contínua de dados e um sistema de estilos semelhante ao CSS para desacoplar conteúdo da apresentação, reduzindo a sensibilidade a formatações. Ele inclui modelagem para prompts dinâmicos e um kit de ferramentas abrangente para desenvolvedores (suporte a IDE, SDKs) para melhorar o controle de versão e a colaboração. Validamos o POML por meio de dois estudos de caso que demonstram seu impacto na integração de aplicações complexas (PomLink) e no desempenho de precisão (TableQA), além de um estudo com usuários que avalia sua eficácia em cenários reais de desenvolvimento.

English

Large Language Models (LLMs) require sophisticated prompting, yet current practices face challenges in structure, data integration, format sensitivity, and tooling. Existing methods lack comprehensive solutions for organizing complex prompts involving diverse data types (documents, tables, images) or managing presentation variations systematically. To address these gaps, we introduce POML (Prompt Orchestration Markup Language). POML employs component-based markup for logical structure (roles, tasks, examples), specialized tags for seamless data integration, and a CSS-like styling system to decouple content from presentation, reducing formatting sensitivity. It includes templating for dynamic prompts and a comprehensive developer toolkit (IDE support, SDKs) to improve version control and collaboration. We validate POML through two case studies demonstrating its impact on complex application integration (PomLink) and accuracy performance (TableQA), as well as a user study assessing its effectiveness in real-world development scenarios.