Projekt SCHATTEN: Symbolische höherstufige assoziative deduktive Schlussfolgerung auf Wikidata unter Verwendung von LM-Sondierung.

Project SHADOW: Symbolic Higher-order Associative Deductive reasoning On Wikidata using LM probing

August 27, 2024

Autoren: Hanna Abi Akl

cs.AI

Zusammenfassung

Wir stellen SHADOW vor, ein feinabgestimmtes Sprachmodell, das auf einer Zwischenaufgabe mit assoziativer deduktiver Schlussfolgerung trainiert wurde, und messen seine Leistung bei einer Wissensbasis-Konstruktion mit der Vervollständigung von Wikidata-Tripeln. Wir evaluieren SHADOW in der LM-KBC 2024 Herausforderung und zeigen, dass es die Baseline-Lösung um 20% mit einem F1-Score von 68,72% übertrifft.

English

We introduce SHADOW, a fine-tuned language model trained on an intermediate task using associative deductive reasoning, and measure its performance on a knowledge base construction task using Wikidata triple completion. We evaluate SHADOW on the LM-KBC 2024 challenge and show that it outperforms the baseline solution by 20% with a F1 score of 68.72%.