Gezamenlijke critici voor het genereren van creatieve verhalen

Collective Critics for Creative Story Generation

October 3, 2024

Auteurs: Minwook Bae, Hyounghun Kim

cs.AI

Samenvatting

Het genereren van een lang verhaal van enkele duizenden woorden met narratieve samenhang met behulp van Grote Taalmodellen (LLM's) is een uitdagende taak gebleken. Eerdere onderzoeken hebben dit probleem aangepakt door verschillende kaders voor te stellen die een verhaalplan creëren en op basis daarvan een lang verhaal genereren. Echter, deze kaders hebben zich voornamelijk gericht op het behouden van narratieve samenhang in verhalen, waarbij vaak creativiteit in verhaalplanning en de expressiviteit van de gegenereerde verhalen vanuit die plannen over het hoofd worden gezien, wat wenselijke eigenschappen zijn om de interesse van lezers te wekken. In dit artikel stellen we het Collectieve Critici voor Creatieve Verhaalgeneratiekader (CritiCS) voor, dat bestaat uit een planningsverfijningsfase (CrPlan) en een verhaalgeneratiefase (CrText), om een collectief revisiemechanisme te integreren dat deze eigenschappen bevordert in het proces van het genereren van langere verhalen. Specifiek werkt in elke fase een groep LLM-critici en een leider samen om conceptversies van het plan en het verhaal stapsgewijs te verfijnen gedurende meerdere rondes. Uitgebreide menselijke evaluatie toont aan dat de CritiCS aanzienlijk de creativiteit van verhalen en de betrokkenheid van lezers kan verbeteren, terwijl ook de narratieve samenhang behouden blijft. Bovendien maakt het ontwerp van het kader actieve deelname mogelijk van menselijke schrijvers in elke rol binnen het kritiekproces, waardoor interactieve mens-machine samenwerking mogelijk is bij het schrijven van verhalen.

English

Generating a long story of several thousand words with narrative coherence using Large Language Models (LLMs) has been a challenging task. Previous research has addressed this challenge by proposing different frameworks that create a story plan and generate a long story based on that plan. However, these frameworks have been mainly focusing on maintaining narrative coherence in stories, often overlooking creativity in story planning and the expressiveness of the stories generated from those plans, which are desirable properties to captivate readers' interest. In this paper, we propose Collective Critics for Creative Story Generation framework (CritiCS), which is composed of plan refining stage (CrPlan) and story generation stage (CrText), to integrate a collective revision mechanism that promotes those properties into long-form story generation process. Specifically, in each stage, a group of LLM critics and one leader collaborate to incrementally refine drafts of plan and story throughout multiple rounds. Extensive human evaluation shows that the CritiCS can significantly enhance story creativity and reader engagement, while also maintaining narrative coherence. Furthermore, the design of the framework allows active participation from human writers in any role within the critique process, enabling interactive human-machine collaboration in story writing.