Critiques collectives pour la génération créative d'histoires

Collective Critics for Creative Story Generation

October 3, 2024

Auteurs: Minwook Bae, Hyounghun Kim

cs.AI

Résumé

Générer une longue histoire de plusieurs milliers de mots avec une cohérence narrative en utilisant les Grands Modèles de Langage (GML) a été une tâche difficile. Les recherches précédentes ont abordé ce défi en proposant différents cadres qui créent un plan de l'histoire et génèrent une longue histoire basée sur ce plan. Cependant, ces cadres se sont principalement concentrés sur le maintien de la cohérence narrative dans les histoires, en négligeant souvent la créativité dans la planification de l'histoire et l'expressivité des histoires générées à partir de ces plans, qui sont des propriétés souhaitables pour captiver l'intérêt des lecteurs. Dans cet article, nous proposons le cadre des Critiques Collectives pour la Génération Créative d'Histoires (CritiCS), qui est composé d'une étape de raffinement du plan (CrPlan) et d'une étape de génération d'histoire (CrText), afin d'intégrer un mécanisme de révision collective qui favorise ces propriétés dans le processus de génération d'histoires longues. Plus précisément, à chaque étape, un groupe de critiques de GML et un leader collaborent pour affiner de manière incrémentielle les brouillons du plan et de l'histoire à travers plusieurs tours. Une évaluation humaine approfondie montre que le CritiCS peut améliorer significativement la créativité des histoires et l'engagement des lecteurs, tout en maintenant la cohérence narrative. De plus, la conception du cadre permet une participation active des écrivains humains dans n'importe quel rôle au sein du processus de critique, permettant une collaboration humain-machine interactive dans l'écriture d'histoires.

English

Generating a long story of several thousand words with narrative coherence using Large Language Models (LLMs) has been a challenging task. Previous research has addressed this challenge by proposing different frameworks that create a story plan and generate a long story based on that plan. However, these frameworks have been mainly focusing on maintaining narrative coherence in stories, often overlooking creativity in story planning and the expressiveness of the stories generated from those plans, which are desirable properties to captivate readers' interest. In this paper, we propose Collective Critics for Creative Story Generation framework (CritiCS), which is composed of plan refining stage (CrPlan) and story generation stage (CrText), to integrate a collective revision mechanism that promotes those properties into long-form story generation process. Specifically, in each stage, a group of LLM critics and one leader collaborate to incrementally refine drafts of plan and story throughout multiple rounds. Extensive human evaluation shows that the CritiCS can significantly enhance story creativity and reader engagement, while also maintaining narrative coherence. Furthermore, the design of the framework allows active participation from human writers in any role within the critique process, enabling interactive human-machine collaboration in story writing.