Project SHADOW: Symbolisch hogere-orde associatief deductief redeneren op Wikidata met behulp van LM-probing

Project SHADOW: Symbolic Higher-order Associative Deductive reasoning On Wikidata using LM probing

August 27, 2024

Auteurs: Hanna Abi Akl

cs.AI

Samenvatting

We introduceren SHADOW, een fijn afgestemd taalmodel getraind op een tussenliggende taak met behulp van associatief deductief redeneren, en meten de prestaties ervan op een taak voor het construeren van een kennisbank met behulp van Wikidata-triplecompletering. We evalueren SHADOW op de LM-KBC 2024-uitdaging en laten zien dat het de baseline-oplossing met 20% overtreft met een F1-score van 68,72%.

English

We introduce SHADOW, a fine-tuned language model trained on an intermediate task using associative deductive reasoning, and measure its performance on a knowledge base construction task using Wikidata triple completion. We evaluate SHADOW on the LM-KBC 2024 challenge and show that it outperforms the baseline solution by 20% with a F1 score of 68.72%.