Отчет о подсказках: Систематический обзор техник подсказок

The Prompt Report: A Systematic Survey of Prompting Techniques

June 6, 2024

Авторы: Sander Schulhoff, Michael Ilie, Nishant Balepur, Konstantine Kahadze, Amanda Liu, Chenglei Si, Yinheng Li, Aayush Gupta, HyoJung Han, Sevien Schulhoff, Pranav Sandeep Dulepet, Saurav Vidyadhara, Dayeon Ki, Sweta Agrawal, Chau Pham, Gerson Kroiz, Feileen Li, Hudson Tao, Ashay Srivastava, Hevander Da Costa, Saloni Gupta, Megan L. Rogers, Inna Goncearenco, Giuseppe Sarli, Igor Galynker, Denis Peskoff, Marine Carpuat, Jules White, Shyamal Anadkat, Alexander Hoyle, Philip Resnik

cs.AI

Аннотация

Системы генеративного искусственного интеллекта (GenAI) все чаще применяются в различных отраслях промышленности и исследовательских средах. Разработчики и конечные пользователи взаимодействуют с этими системами с помощью формулировки запросов или инженерии запросов. Хотя формулировка запросов является широко распространенным и хорошо изученным концептом, существует противоречивая терминология и недостаточное онтологическое понимание того, что представляет собой запрос из-за молодости этой области. В данной статье устанавливается структурированное понимание запросов путем создания таксономии техник формулировки запросов и анализа их использования. Мы представляем обширный словарь из 33 терминов, таксономию из 58 техник формулировки текстовых запросов и 40 техник для других модалей. Кроме того, мы представляем мета-анализ всей литературы по префиксной формулировке запросов на естественном языке.

English

Generative Artificial Intelligence (GenAI) systems are being increasingly deployed across all parts of industry and research settings. Developers and end users interact with these systems through the use of prompting or prompt engineering. While prompting is a widespread and highly researched concept, there exists conflicting terminology and a poor ontological understanding of what constitutes a prompt due to the area's nascency. This paper establishes a structured understanding of prompts, by assembling a taxonomy of prompting techniques and analyzing their use. We present a comprehensive vocabulary of 33 vocabulary terms, a taxonomy of 58 text-only prompting techniques, and 40 techniques for other modalities. We further present a meta-analysis of the entire literature on natural language prefix-prompting.