Wissensnavigator: LLM-geführtes Browsing-Framework für explorative Suche in wissenschaftlicher Literatur

Knowledge Navigator: LLM-guided Browsing Framework for Exploratory Search in Scientific Literature

August 28, 2024

Autoren: Uri Katz, Mosh Levy, Yoav Goldberg

cs.AI

Zusammenfassung

Das exponentielle Wachstum der wissenschaftlichen Literatur erfordert fortschrittliche Tools für eine effektive Wissenserforschung. Wir präsentieren Knowledge Navigator, ein System, das entwickelt wurde, um die explorativen Suchfähigkeiten zu verbessern, indem die abgerufenen Dokumente aus breiten thematischen Abfragen in eine navigierbare, zweistufige Hierarchie von benannten und beschreibenden wissenschaftlichen Themen und Unterkategorien organisiert und strukturiert werden. Diese strukturierte Organisation bietet einen Gesamtüberblick über die Forschungsthemen in einem Bereich und ermöglicht gleichzeitig eine iterative Suche und tiefere Wissensentdeckung innerhalb spezifischer Unterkategorien, indem Benutzern ermöglicht wird, ihren Fokus zu verfeinern und zusätzliche relevante Dokumente abzurufen. Knowledge Navigator kombiniert LLM-Fähigkeiten mit clusterbasierten Methoden, um eine effektive Browsermethode zu ermöglichen. Wir zeigen die Wirksamkeit unseres Ansatzes durch automatische und manuelle Bewertungen anhand von zwei neuen Benchmarks, CLUSTREC-COVID und SCITOC. Unser Code, unsere Anfragen und Benchmarks sind öffentlich verfügbar gemacht worden.

English

The exponential growth of scientific literature necessitates advanced tools for effective knowledge exploration. We present Knowledge Navigator, a system designed to enhance exploratory search abilities by organizing and structuring the retrieved documents from broad topical queries into a navigable, two-level hierarchy of named and descriptive scientific topics and subtopics. This structured organization provides an overall view of the research themes in a domain, while also enabling iterative search and deeper knowledge discovery within specific subtopics by allowing users to refine their focus and retrieve additional relevant documents. Knowledge Navigator combines LLM capabilities with cluster-based methods to enable an effective browsing method. We demonstrate our approach's effectiveness through automatic and manual evaluations on two novel benchmarks, CLUSTREC-COVID and SCITOC. Our code, prompts, and benchmarks are made publicly available.